« 返回前頁列印

2021-02-09 00:00

StartupBeat 創科鬥室

AI看無聲影片憑指法還原琴音

放大圖片
著名德國作曲家、鋼琴演奏家貝多芬28歲開始聽覺衰退,即使無法聆聽樂章,到完全失聰後仍以心作曲。美國華盛頓大學有研究團隊以人工智能(AI)挑戰無聲辨曲,設計出一款AI系統Audeo,觀察無聲影片彈琴者的手部動作,便可還原鋼琴的演奏聲音,還原度高達86%。 華盛頓大學網站介紹,分析無聲短片時,Audeo通過觀察演奏者的手部動作,記錄所按琴鍵及按鍵次序。同時,系統會分析演奏者的按鍵力度及時長,藉此計算每個琴音的輕重及長短。其後,系統會把這些數據,轉換成一張「樂譜」,適用於現有的音樂合成軟件,如Fluidsynth、PerfNet等演奏出來。 分析Paul Barton短片 成功率86% 研究團隊為訓 ...

(節錄)全文共677字