參考音檔怎麼錄,免費聲音克隆才不會聽起來像機器人?
你有沒有想過,為什麼別人的 AI 配音聽起來像真人,你的卻像高鐵站的自動導覽機?
上週幫一個做自媒體的朋友弄短影音口白,他丟了一支「參考音檔」給我,說隨便找個免費聲音克隆工具就能用吧?結果我播放克隆後的聲音,差點把飲料噴出來——每個字都標準得不可思議,但連在一起就是有種說不出的違和。像極了大學時期被抽起來念課文的同學,字正腔圓,卻毫無靈魂。
後來我幫他重錄,只花了五分鐘。再丟進線上工具,效果差超多。
其實問題不在免費聲音克隆技術本身,而在參考音檔怎麼錄。你餵給 AI 什麼樣的素材,它就還你什麼樣的聲音。今天就把我踩過的坑和總結的細節一次說透。
底噪:機器人感的頭號兇手
先講最常被忽略的——底噪。
很多人以為房間安靜就夠了,但在台灣住家,冷氣室外機的轟鳴、樓上拖拉家具、巷口機車呼嘯而過,這些都會偷偷跑進你的參考音檔。AI 不會自動幫你濾掉,它只會老實學起來。我實測過,同一段文字,用有底噪的版本跟乾淨版本分別克隆,前者出來的聲音就是悶悶的,帶點「塑膠感」。
你可以用 Audacity 打開波形圖看看,底噪會讓底部像鋪了一層毛毯,完全不平整。
解法:錄之前把風扇、冷氣、除濕機全部關掉,手機放遠一點,有領夾麥或動圈麥更好。真的沒辦法完全靜音,後製時用降噪處理一下,但切記別降過頭,聲音會發虛,像隔著棉被說話。
還有一個細節——嘴巴離麥克風大概一個拳頭,太近會有噴麥、齒音,太遠又會吃到房間混響。
停頓與語氣:讓 AI 學會「呼吸」
第二個關鍵是停頓。
真人講話有換氣、有思考,但很多人錄參考音檔時怕浪費時間,一口氣從頭噴到尾,克隆出來就變成機關槍。我自己的習慣是在逗號、句號的地方自然停 0.3 到 0.5 秒,句尾稍微降調。這樣 AI 才學得到句子邊界,輸出時才會自動帶出節奏。
語氣也是。你想克隆熱情的聲音,參考音檔裡就要有笑意;要沉穩的,就得壓低嗓子。別想著後台調情緒標籤,AI 學的是你的發聲方式,不是標籤。
我曾經錄一段帶疑問語氣的句子,後來用免費文字轉語音合成其他文本時,連疑問句的尾音都會自動上揚,非常自然。
小技巧:多錄幾遍,選最像在跟朋友聊天的版本。人的第一遍通常最僵硬。
多語言配音:別讓台灣國語腔跟著出國
如果你常做英文或日文配音,這點要注意——參考音檔裡不要有太重的台灣國語腔或語尾助詞(譬如每句都帶個「齁」「啊」),否則 AI 會把這些發音習慣一起帶進目標語言。我上次做日文產品介紹,參考音檔不小心帶了點台灣國語的黏扁,結果克隆出來的日文,每個音節之間都像卡了一層膜,超怪。
後來重錄,用清楚但不過度播音腔的國語,效果才對。
另外,語速要抓。日文平均比中文快一點,你的參考音檔就可以稍微提速;德文慢,就放慢。但不要刻意用軟體變速,AI 會學成一頓一頓的。
如果你用的是線上文字轉語音免費工具,可以在腳本裡加標點引導停頓,例如用「……」拉長空白,用驚嘆號加強語氣。這跟參考音檔的停頓配合起來,效果很驚喜。
我在聲音克隆技巧分享裡也看過有人建議,同一顆聲音要跨語言使用時,最好分開錄兩段參考音檔——一段中文,一段目標語言(哪怕只會幾句)。這樣 AI 能分別學習發音和節奏,比單一語言參考強得多。
設備選擇:手機也能出好活,但別拿在手上
手機麥克風在安靜環境其實夠用了,關鍵是不要拿在手上錄。你手心的摩擦聲、呼吸聲全會被收進去,克隆出來像隔著一層棉被。找個支架把手機橫立在桌上,距離嘴巴一拳,效果立竿見影。
如果常做,買一條幾百塊的領夾麥或入門動圈麥,信噪比會直接升級。動圈麥對環境噪音比較不敏感,適合家裡沒辦法完全靜音的租屋族;電容麥細節多,但得配合錄音介面、防噴罩,否則齒音會讓 AI 學歪。
後期微調:給 AI 留一點餘地
錄完別急著壓成 128 kbps MP3 就上傳。保留 44.1 kHz / 16-bit WAV,給模型完整頻譜。剪輯只做兩件事:切掉頭尾長靜音,做一次正規化(Normalize)。
千萬不要開壓縮器、激勵器或什麼「人聲增強」預設。那些處理會把自然的呼吸、細微的尾音全部抹平,AI 學到的反而是「廣播腔」,生成時更像機器人。
實戰案例:三十秒短影音口白的完整流程
上週趕一支 30 秒的產品短影音,全程只用手機加領夾麥。先在臥室關掉冷氣,喝口溫水潤喉,把腳本按語意分成五段,每段留 0.5 秒空白。錄三遍,挑最順的一版,進電腦只做正規化,直接拖進免費聲音克隆。
生成後發現第三段語速稍快,我回到文本在關鍵詞前加了兩個逗號,再生成一次,語調立刻從容很多。最後按剪輯點切齊,配樂,丟上 IG。結果留言有人問:「這是真人還是 AI?」——這就是我要的效果。
說真的,與其到處試聲音克隆軟體免費版,不如先把參考音檔的品質顧好。現在很多平台打著永久免費聲音克隆、真人語音合成免費,有些還主打無限制文字轉語音、免註冊聲音合成,但音檔沒錄好,工具再強也救不了。我後來自己常用的是免註冊的免費 TTS 聲音合成服務,省去一堆帳號密碼。如果你是工程師想串服務,也可以研究免費語音合成 API,但要注意各家商用授權。
常見問題 FAQ
參考音檔要錄多久?
至少兩分鐘,建議三分鐘左右。太短,AI 學不到完整的語調變化;太長,反而容易混入不穩定的發音。我通常錄三分鐘,包含陳述句、疑問句、驚嘆句,覆蓋不同情緒。
用手機錄可以嗎?
可以,但盡量別用手機內建那種會自動壓縮的錄音 APP。iPhone 的「語音備忘錄」選無損格式,或用第三方錄音程式,取樣率至少 44.1 kHz。錄的時候橫屏放桌上,千萬別拿在手上。
克隆出來還是有機械感,怎麼辦?
先檢查參考音檔有沒有底噪,再聽停頓是否自然。如果都沒問題,試著在免費 AI 配音的文本裡多加標點和換行,讓 TTS 分段處理。有些詞可以用破折號或逗號拆開,避免連讀錯誤。
動手之前
下次錄參考音檔前,先關掉風扇,倒杯水潤潤喉,然後念一段今天發生的瑣事。錄完自己聽一遍——如果聽起來像在跟朋友聊天,而不是在跟課文對話,那這版就能用。
去免註冊聲音線上克隆試一下,把音檔傳上去,對比你平常講話的差異。你會發現,真人和機器人的距離,有時候只差一次用心的錄音。