【NovelAI_txt2video】使用說(shuō)明

數(shù)據(jù)配置

data_set.py配置，使用notepad++打開，文件位置在NovelAIUser=>apps=>Data下進(jìn)行配置。

填寫用戶名和密碼，以及對(duì)應(yīng)的API密鑰。

配置教程

登錄云端后臺(tái)

云端配置GPT35

選擇GPT配置信息，這里有2個(gè)地方一個(gè)是API接口，支持知數(shù)云和OPENAI原版，接下來(lái)選擇然后選擇關(guān)鍵詞模板，這個(gè)是用來(lái)根據(jù)文章內(nèi)容進(jìn)行畫面關(guān)鍵詞描述用，也可以自定義，在自定義組合中填寫，如果需要自定義請(qǐng)?jiān)诮M合處選擇【自定義組合】。

云端配置TTS

用于給視頻中的稿件配音用，這里僅支持微軟TTS，可以根據(jù)自己的情況選擇配音選項(xiàng)。

云端配置SD

配置SD接口url，如果是本地的話創(chuàng)建后不需要修改，如果是云端繪圖請(qǐng)修改成你自己的接口地址。

通用關(guān)鍵詞，這里是對(duì)于繪畫時(shí)候每一個(gè)圖片都要加的關(guān)鍵詞信息，也就是通用關(guān)鍵詞，根據(jù)自己情況進(jìn)行填寫。

視頻分辨率，這里選擇視頻是橫版還是豎版的，一定要和后面的分辨率保持一致。分辨率倍數(shù)建議和圖片高清放大的倍數(shù)一致。

關(guān)鍵幀移動(dòng)速度，這個(gè)速度不好解釋自己體會(huì)，關(guān)鍵幀是暫時(shí)不支持自定義方向，方向移動(dòng)全部隨機(jī)。

SD繪圖，SD繪圖的基本設(shè)置。

SD高清修復(fù)功能，根據(jù)自己的顯卡量力而行。

動(dòng)漫繪畫插件，每一行左邊選擇需要的選項(xiàng)，右邊選擇強(qiáng)度數(shù)值，強(qiáng)度1表示該關(guān)鍵詞加一對(duì)()，以此類推。

鑒黃功能模塊，如果需要就打開，會(huì)影響一些出圖速度。

云端剪映配置

這個(gè)用于生成剪映中的配置文件直接指向你的文件目錄，例如你的整個(gè)項(xiàng)目包debug_NovelAI_web文件夾在D盤下，那么這里填寫 D:\\debug_NovelAI_web 即可。

使用教程

開啟服務(wù)

打開程序包中的 啟動(dòng)Web服務(wù).bat 文件，雙擊即可。確保機(jī)器的80端口打開，如果出現(xiàn)打開馬上關(guān)閉的情況證明80端口被占用了，請(qǐng)自行解決。

執(zhí)行完之后會(huì)自動(dòng)彈出來(lái)一個(gè)網(wǎng)頁(yè)，地址是 http://127.0.0.1 ,如果沒彈出來(lái)請(qǐng)自行復(fù)制該地址到瀏覽器中，左側(cè)選項(xiàng)卡中會(huì)有8個(gè)步驟。

登錄你的本地?cái)?shù)據(jù)后臺(tái) http://127.0.0.1/xadmin/

LoRA添加

點(diǎn)擊【Lora管理】選項(xiàng)卡進(jìn)入后點(diǎn)擊有責(zé)的增加Lora模型管理。

按照以下要求填寫你的Lora模型配置

• Lora的文件名稱，確保你是SD/models/Lora中有該文件
• 你在SD頁(yè)面選擇lora是這樣就復(fù)制過(guò)來(lái)這樣的內(nèi)容

稿件添加任務(wù)

點(diǎn)擊【文章數(shù)據(jù)】選項(xiàng)卡，點(diǎn)擊右側(cè)添加文生圖任務(wù)管理

基本信息填寫，對(duì)沒完成的視頻建議選擇未完成，可以使用批量操作來(lái)進(jìn)行識(shí)別完成。

文章基本信息中文章類別，英文名稱，中文名稱自定義填寫即可。

Lora配置不需要?jiǎng)?，在后面的步驟這里會(huì)自動(dòng)生成。

文章detail中，復(fù)制你的故事正文即可，字?jǐn)?shù)不限，建議8000字以內(nèi)。

最后填寫完畢后記得保存即可。

Step1 數(shù)據(jù)拆分操作

Lora部分，支持現(xiàn)版本支持10個(gè)Lora填充匹配，這里需要填寫3部分內(nèi)容。

• 人物姓名列-表示該行不使用。
• 人物姓名，如果不需要?jiǎng)t不用填。支持多個(gè)人物姓名，原理就是文章中斷句后出現(xiàn)該字符匹配即調(diào)用Lora，也支持多個(gè)匹配。例如填寫方式如下，如果出現(xiàn)多個(gè)匹配同時(shí)替換的話請(qǐng)用 @ 分割。

• Lora選擇，需要在adminx后臺(tái)設(shè)置好Lora這里下拉就會(huì)有顯示選擇。

• 英文描述，這個(gè)是對(duì)于這個(gè)Lora人物的描述，比如小明，可以用a boy,black hair，這種關(guān)鍵詞描述。設(shè)置好之后點(diǎn)擊【保存Lora設(shè)置】即可，每次重新輸入會(huì)覆蓋掉之前的數(shù)據(jù)。

任務(wù)數(shù)據(jù)，直接點(diǎn)擊后臺(tái)需要處理分句的文章會(huì)進(jìn)行自動(dòng)分句操作。稿件會(huì)以句號(hào)進(jìn)行分句操作，如果稿件為純英文的需要將.改成。即可。分句后會(huì)在后臺(tái)顯示分句的結(jié)果。

Step2 使用GPT進(jìn)行關(guān)鍵詞操作

網(wǎng)頁(yè)界面點(diǎn)擊需要處理的文章會(huì)自動(dòng)的進(jìn)行關(guān)鍵詞生成操作，使用的是云端后臺(tái)控制的模板自動(dòng)生成繪畫的畫面描述。

生成完的關(guān)鍵詞會(huì)在數(shù)據(jù)庫(kù)中顯示。如果想使用該方法查看

NovelAI 一鍵成片數(shù)據(jù)管理與操作

也可以在管理后臺(tái)查看。

如果想修改請(qǐng)?jiān)诤笈_(tái)中操作，如果想批量全部重新生成，請(qǐng)將pormpt字段修改成 待處理 即可。

Step3 TTS生成語(yǔ)音服務(wù)

需要在云端配置好配音人的聲音配置。直接點(diǎn)擊需要生成語(yǔ)音的文章，會(huì)在后臺(tái)自動(dòng)執(zhí)行生成音頻操作。

在項(xiàng)目下的media文件夾下找到對(duì)應(yīng)的項(xiàng)目文件點(diǎn)開有2個(gè)音頻文件夾。

audio_wav是合并的長(zhǎng)音頻，each_audio_wav是每個(gè)分句后的短音頻，音頻生成會(huì)自動(dòng)跳過(guò)已經(jīng)生成的音頻，并且自動(dòng)識(shí)別損壞的音頻文件重新生成。

Step4 Stable Diffusion繪畫

首先需要打開SD，確保本地端口是7860，或者自己調(diào)通自己的云端設(shè)置API路由。然后直接執(zhí)行操作即可。

需要確保使用的VAE是
vae-ft-mse-840000-ema-pruned.safetensors，這樣840000的標(biāo)志。需要確保已經(jīng)安裝了ADetailer插件，因?yàn)橄到y(tǒng)會(huì)自動(dòng)進(jìn)行修復(fù)操作。

ADetailer 用于自動(dòng)修復(fù)臉部，手部，身體崩潰。文字和視頻安裝配置教程：

Stable Difussion 拒絕崩臉崩手崩身 ADetailer 插件

點(diǎn)擊執(zhí)行需要生成圖片的任務(wù)在media項(xiàng)目文件夾下會(huì)自動(dòng)生成對(duì)應(yīng)的圖片。

圖片重繪操作，首先需要點(diǎn)擊你要重繪的任務(wù)。

然后篩選需要重繪的圖片點(diǎn)擊重繪即可。如果圖片無(wú)法顯示請(qǐng)多更換幾個(gè)瀏覽器試試。

Step5 合成視頻文件

點(diǎn)擊需要合成的項(xiàng)目，會(huì)自動(dòng)的進(jìn)行合成。

生成是視頻文件保存在media項(xiàng)目下的data_result里。文件的命令是管理后臺(tái)設(shè)置的中文名稱。

Step6 生成配置文件

點(diǎn)擊需要生成配置文件的項(xiàng)目，會(huì)自動(dòng)生成AE、剪映、文檔、封面等內(nèi)容。

剪映配置文件使用，直接將draft_content.json文件扔到剪映的項(xiàng)目的配置文件下即可。直接覆蓋替換即可。

AE文件直接點(diǎn)擊加載腳本選擇AE文件即可，不過(guò)AE配置所有的文件路徑中不能有中文否則無(wú)法識(shí)別。

Step All

分兩種批量執(zhí)行方法。不管那種執(zhí)行方法都需要完成Step1的操作。并且在adminx控制臺(tái)標(biāo)記未完成。

單項(xiàng)批量執(zhí)行在每個(gè)項(xiàng)目下點(diǎn)擊【全部執(zhí)行未處理標(biāo)記內(nèi)容】

全部批量執(zhí)行，直接點(diǎn)擊【Step All】點(diǎn)擊執(zhí)行即可。