熟悉我的小伙伴，應(yīng)該知道我一直在關(guān)注AI生成圖片領(lǐng)域，也一直在持續(xù)分享相關(guān)教程。最近關(guān)注點(diǎn)稍微側(cè)重到了LLM（大語(yǔ)言模型）上，回頭一看，AI繪畫又進(jìn)化了。今天帶來(lái)一款超強(qiáng)AI繪畫模型，能一鍵讓照片說(shuō)話、唱歌。以下是生成的視頻：

安裝

這款A(yù)I一鍵讓照片說(shuō)話的模型叫，是由西安交通大學(xué)的研究人員提出的，它可以讓照片里的人物跟隨音頻的輸入動(dòng)起來(lái)，且頭部運(yùn)動(dòng)、面部表情比較真實(shí)，下圖是官方展示的效果圖，還在等什么呢，即刻擁有它！

①建議先部署SD（--），可以參考以下文章：

因?yàn)镾D已經(jīng)支持了的插件了，后續(xù)從SD生成的圖片，都可以直接一鍵生成說(shuō)話、唱歌視頻。

（當(dāng)然了，你也可以不部署SD，直接使用）

②安裝插件：

打開并運(yùn)行SD ，然后選擇“擴(kuò)展”，在“從網(wǎng)址安裝”里，輸入以下地址：

點(diǎn)擊安裝，需要等待3~5分鐘。

安裝完成后，重啟一下SD ，即可在功能欄里看到“”插件欄了。

安裝

是一套可以用來(lái)記錄、轉(zhuǎn)換數(shù)字音頻、視頻，并能將其轉(zhuǎn)化為流的開源計(jì)算機(jī)程序，是運(yùn)行的必要支持程序。可以從以下網(wǎng)址下載獲得：

解壓后，需要將的bin文件夾路徑添加到系統(tǒng)環(huán)境變量里：

手動(dòng)添加環(huán)境變量：控制面板→系統(tǒng)→高級(jí)系統(tǒng)設(shè)置→環(huán)境變量→Path→編輯→添加

下載模型

運(yùn)行，還需要下載一些模型，可以從以下鏈接獲得：

需要下載前面的10個(gè)文件：

找到之前在SD里添加的插件（在SD文件夾\里），然后新建一個(gè)文件夾“”：

將上面下載的10個(gè)模型文件復(fù)制進(jìn)去，其中和hub兩個(gè)壓縮文件還需要解壓到文件根目錄中。

至此，你已經(jīng)擁有了一鍵讓圖片說(shuō)話的能力了。

試試效果

在SD 的功能欄里，選擇“”，然后將圖片（支持從SD中加載）和音頻傳入，音頻建議在10秒以內(nèi)，不然顯卡壓力有點(diǎn)大。點(diǎn)擊“生成”按鈕，即可一鍵使照片說(shuō)話。

相關(guān)設(shè)置項(xiàng)說(shuō)明：

同時(shí)記得勾選“面部增強(qiáng)”，使整體面部效果更加自然些。

最終得到了文章開頭的會(huì)說(shuō)話、唱歌的小姐姐了，她還會(huì)很自然地眨眼睛呢，成就感滿滿有木有！感興趣的小伙伴快去試試吧~

往期回顧

AI繪畫相關(guān)：

其他AI相關(guān)：

關(guān)注我，跟我一起瘋狂學(xué)習(xí)AI，請(qǐng)?jiān)谟蚁陆屈c(diǎn)一下“在看”~