激情六月丁香婷婷|亚洲色图AV二区|丝袜AV日韩AV|久草视频在线分类|伊人九九精品视频|国产精品一级电影|久草视频在线99|在线看的av网址|伊人99精品无码|午夜无码视频在线

高校合作1:010-59833514 ?咨詢電話:400-810-1418 服務(wù)與監(jiān)督電話:400-810-1418轉(zhuǎn)接2

AI聲音轉(zhuǎn)換潮流 | 強力推薦!(限時特惠)

發(fā)布時間:2024-08-15 17:27:59 瀏覽量:160次

AI聲音克隆 | 最全最簡教程(限時特惠)

一直沒有寫過關(guān)于聲音克隆的文章,所以這次補上,畢竟這個用的還真是有點多,也為后面更多的個性化配音做好準備。

TTS 的英文全名是 Text To Speech,中文譯名是“文本轉(zhuǎn)語音”。它是一種將文本內(nèi)容轉(zhuǎn)換為語音的技術(shù),通過TTS技術(shù),計算機可以將文字信息轉(zhuǎn)換成人類可聽懂的語音輸出,實現(xiàn)語音合成的功能。

目前市場上的AI聲音

我們最多用的還是普通的TTS,即把文字通過軟件輸出指定人的聲音,這塊微軟做的不錯,之前自己寫過一個免費的TTS小軟件,API用的就是微軟的,如有需要,請看自己開發(fā) 一個免費的文本轉(zhuǎn)語音小工具(這里插不進來鏈接,聯(lián)系小編)。

如果你覺得功能少,可以使用國內(nèi)的魔音工坊,但是要收費的哈。

但這些都不能指定聲音轉(zhuǎn)換,所以這里使用聲音克隆,來將指定人聲訓(xùn)練成模型,然后文字轉(zhuǎn)音頻。

接下來說重點聲音克隆

開源項目地址:
https://github.com/fishaudio/Bert-VITS2
https://github.com/RVC-Boss/GPT-SoVITS

GPT-SoVITS是由RVC變聲器的創(chuàng)始人(GitHub昵稱為RVC-Boss)與AI音色轉(zhuǎn)換技術(shù)專家Rcell合作開發(fā)的一個開源項目。它是一個跨語言音色克隆工具,專注于聲音的轉(zhuǎn)換和克隆。

Bert-VITS2是由社區(qū)開發(fā)者fishaudio發(fā)起的一個開源項目,它基于VITS(Variational Inference for Text-to-Speech)模型進行開發(fā),旨在提供高質(zhì)量的文本到語音(TTS)服務(wù)。

GPT-SoVITS在訓(xùn)練時間上具有明顯的優(yōu)勢,因為它支持Few-shot學(xué)習(xí),能夠在短時間內(nèi)(如一分鐘的語音數(shù)據(jù))訓(xùn)練出具有相似音色的模型。

Bert-VITS2可能需要更長的訓(xùn)練時間(1-4個小時)來達到高質(zhì)量的語音合成效果,尤其是在數(shù)據(jù)集較大或模型較為復(fù)雜的情況下。

簡單來說就是如果你需要更穩(wěn)定和標準的聲音,辛苦一次永久使用就選擇Bert-VITS;

如果你想快速實現(xiàn)聲音克隆,跨語言就選擇 GPT-SoVITS;

這里以GPT-SoVITS為例,寫一篇詳細教程,因為他簡單有效還節(jié)省時間,至于Bert-VITS,我感覺即使寫了,他幾個小時的訓(xùn)練時間加上大量的素材收集,許多人也沒時間去嘗試,效果也不一定能好很多,這里力推GPT-SoVITS!讓我們開始吧!

開始前準備,注冊 OpenBayes 平臺賬號

新用戶注冊 OpenBayes即可獲得3小時免費RTX4090使用時長,用下方注冊鏈接你我都可以多加一個小時免費時長哈
點擊咨詢

1 GPT-SoVITS一鍵克隆環(huán)境:

選擇公共資源下的公眾教程,選擇 GPT-SoVITS 音頻合成在線 Demo

點擊右上角克隆,之后選擇審核并執(zhí)行,繼續(xù)執(zhí)行

等待幾分鐘, 等待數(shù)據(jù)同步成功

完成后 打開工作空間

4 打開 run.ipynb,一鍵運行所有單元格

5 等幾秒鐘運行完畢,打開輸出的 public URL

6 打開音頻選擇數(shù)據(jù)類型

7 點擊開始選練

8 等待幾分鐘訓(xùn)練時間

可以后臺看到訓(xùn)練15epoch后訓(xùn)練成功,前端顯示模型開始預(yù)測

4 訓(xùn)練填寫新綁定的數(shù)據(jù)集目錄

5 重復(fù)之前開頭的步驟,最后我們看下效果

說中文效果

克隆李雪健-中文

說英文效果

克隆李雪健English-version

最后,這個教程看著多了點,其實可能我只是盡可能把每個步驟的圖貼完整,盡量滿足各種不懂編程的人都夠順利克隆聲音成功

這個項目還是蠻牛皮,重點在于省時省力,簡單有效,當之為當前性價比速度之神,也期待你能有更多更好玩的用處

如果是英文,建議去llElevenlabs

文章不易,如果你覺得不錯,記得點個贊、在看、轉(zhuǎn)發(fā)吧,感謝!

熱門課程推薦

熱門資訊

請綁定手機號

x

同學(xué)您好!

您已成功報名0元試學(xué)活動,老師會在第一時間與您取得聯(lián)系,請保持電話暢通!
確定