AI一鍵讓照片說話,無限且免費!
熟悉我的小伙伴,應該知道我一直在關注AI生成圖片領域,也一直在持續分享相關教程。最近關注點稍微側重到了LLM(大語言模型)上,回頭一看,AI繪畫又進化了。今天帶來一款超強AI繪畫模型,能一鍵讓照片說話、唱歌。以下是生成的視頻:
安裝
這款AI一鍵讓照片說話的模型叫,是由西安交通大學的研究人員提出的,它可以讓照片里的人物跟隨音頻的輸入動起來,且頭部運動、面部表情比較真實,下圖是官方展示的效果圖,還在等什么呢,即刻擁有它!
①建議先部署SD(--),可以參考以下文章:
因為SD已經支持了的插件了,后續從SD生成的圖片,都可以直接一鍵生成說話、唱歌視頻。
(當然了,你也可以不部署SD,直接使用)
②安裝插件:
打開并運行SD ,然后選擇“擴展”,在“從網址安裝”里,輸入以下地址:
點擊安裝,需要等待3~5分鐘。
安裝完成后,重啟一下SD ,即可在功能欄里看到“”插件欄了。
安裝
是一套可以用來記錄、轉換數字音頻、視頻,并能將其轉化為流的開源計算機程序,是運行的必要支持程序??梢詮囊韵戮W址下載獲得:
解壓后,需要將的bin文件夾路徑添加到系統環境變量里:
手動添加環境變量:控制面板→系統→高級系統設置→環境變量→Path→編輯→添加
下載模型
運行,還需要下載一些模型,可以從以下鏈接獲得:
需要下載前面的10個文件:
找到之前在SD里添加的插件(在SD文件夾\里),然后新建一個文件夾“”:
將上面下載的10個模型文件復制進去,其中和hub兩個壓縮文件還需要解壓到文件根目錄中。
至此,你已經擁有了一鍵讓圖片說話的能力了。
試試效果
在SD 的功能欄里,選擇“”,然后將圖片(支持從SD中加載)和音頻傳入,音頻建議在10秒以內,不然顯卡壓力有點大。點擊“生成”按鈕,即可一鍵使照片說話。
相關設置項說明:
同時記得勾選“面部增強”,使整體面部效果更加自然些。
最終得到了文章開頭的會說話、唱歌的小姐姐了,她還會很自然地眨眼睛呢,成就感滿滿有木有!感興趣的小伙伴快去試試吧~
往期回顧
AI繪畫相關:
其他AI相關:
關注我,跟我一起瘋狂學習AI,請在右下角點一下“在看”~