熟悉我的小伙伴，應該知道我一直在關注AI生成圖片領域，也一直在持續分享相關教程。最近關注點稍微側重到了LLM（大語言模型）上，回頭一看，AI繪畫又進化了。今天帶來一款超強AI繪畫模型，能一鍵讓照片說話、唱歌。以下是生成的視頻：

安裝

這款AI一鍵讓照片說話的模型叫，是由西安交通大學的研究人員提出的，它可以讓照片里的人物跟隨音頻的輸入動起來，且頭部運動、面部表情比較真實，下圖是官方展示的效果圖，還在等什么呢，即刻擁有它！

①建議先部署SD（--），可以參考以下文章：

因為SD已經支持了的插件了，后續從SD生成的圖片，都可以直接一鍵生成說話、唱歌視頻。

（當然了，你也可以不部署SD，直接使用）

②安裝插件：

打開并運行SD ，然后選擇“擴展”，在“從網址安裝”里，輸入以下地址：

點擊安裝，需要等待3~5分鐘。

安裝完成后，重啟一下SD ，即可在功能欄里看到“”插件欄了。

安裝

是一套可以用來記錄、轉換數字音頻、視頻，并能將其轉化為流的開源計算機程序，是運行的必要支持程序。可以從以下網址下載獲得：

解壓后，需要將的bin文件夾路徑添加到系統環境變量里：

手動添加環境變量：控制面板→系統→高級系統設置→環境變量→Path→編輯→添加

下載模型

運行，還需要下載一些模型，可以從以下鏈接獲得：

需要下載前面的10個文件：

找到之前在SD里添加的插件（在SD文件夾\里），然后新建一個文件夾“”：

將上面下載的10個模型文件復制進去，其中和hub兩個壓縮文件還需要解壓到文件根目錄中。

至此，你已經擁有了一鍵讓圖片說話的能力了。

試試效果

在SD 的功能欄里，選擇“”，然后將圖片（支持從SD中加載）和音頻傳入，音頻建議在10秒以內，不然顯卡壓力有點大。點擊“生成”按鈕，即可一鍵使照片說話。

相關設置項說明：

同時記得勾選“面部增強”，使整體面部效果更加自然些。

最終得到了文章開頭的會說話、唱歌的小姐姐了，她還會很自然地眨眼睛呢，成就感滿滿有木有！感興趣的小伙伴快去試試吧~

往期回顧

AI繪畫相關：

其他AI相關：

關注我，跟我一起瘋狂學習AI，請在右下角點一下“在看”~