聲音模型
含有「聲音模型」共 4 篇內容
全部內容
發佈日期由新至舊
人的聲音雖然會隨著情緒、年齡與情境而改變，但在整體上仍然具有足夠穩定的個體性，因此可以作為身份的判準。語音複製技術之所以格外引人關注，正在於它動搖了這個假設：假使機器能夠生成一段「足以被誤認為某人」的語音，那麼聲音便不再是天然可靠的身份憑據，而成為可以被建模、被遷移、被再生產的統計結構。
自回歸模型擅長順序展開，VAE 擅長建立可操控的潛在空間，GAN 擅長逼近感知真實度，flow 擅長在採樣與密度估計之間取得精確平衡，擴散模型擅長把複雜生成問題拆成穩定的小步驟，而 token 模型則擅長把聲音重新帶入大型序列模型的方法論之中。這些框架像是可以互補、可以組合、也可以彼此嵌套的工具箱。
深度學習時代語音合成的每一步架構演進，本質上都在重新回答同一個問題：哪些決策應該留給人類先驗，哪些可以交由模型從資料中發現。 從對齊到韻律，從頻譜預測到波形生成，從模組管線到整合式框架，這條線索貫穿了 從Tacotron、FastSpeech、到Matcha-TTS 的所有差異。
聲音生成有一個重要的特點：聲音不是靜態的物件，而是沿著時間展開的動態結構。一段語音或音樂必須隨著時間逐步被感知。它有開始、有延續、有節奏、有轉折；它既包含瞬時的頻率結構，也包含跨越更長時間範圍的韻律與形式。生成聲音不是單純把正確的元素「放上去」就好，而是要讓這些元素在時間中以合理的方式發生。
