非侵入腦電解碼語音研究拆解技術挑戰
一項發表於Nature系列期刊的研究探討如何從非侵入式腦部記錄中解碼語音感知,並拆解當中的技術挑戰。研究梳理了Mel頻譜圖與人耳感知特性的關係,指出Wav2vec 2.0等語音模型的激活與大腦激活存在線性對應關係。
為何用Mel頻譜
Mel頻譜圖縱軸頻率經過對數變換,與人耳對低頻敏感、對高頻遲鈍的感知特性相符,因而更貼近聽覺系統的運作方式。這種表示方法成為連接語音信號與神經科學分析的重要橋樑。
IXThinker 會員內容
呢篇係 Archive 內容。登入即可解鎖全文,仲有成個 15,000+ 篇、每日更新嘅 AI 動態資料庫。
免費登入/註冊解鎖全文 →Google 或電郵地址即可,即刻解鎖。
