川普 aka 黃國昌咆哮獸+甩蔥歌(AI SadTalker 將靜態圖像轉成對嘴動畫)

更新於 發佈於 閱讀時間約 3 分鐘

先上個一標準範例:


但我當然不會規規矩矩的這樣子用,又輪到我們的川普上場了:

(川普:幹又是我!)

我想這些軟體作者應該會想殺了我,大家在介紹軟體時都是放一些乾淨漂亮的標準範例,結果我都放一些惡搞的極限使用,一用下去馬上爛給你看。

另外,我怕黃國昌來告我,附上使用素材來源:

黃國昌會唱甩蔥歌的原因是,他答應直播觀眾若有達成特定里程碑的話就會唱一首甩蔥歌來回饋觀眾(自我體罰?)。

除了甩蔥歌之外再加上一些黃國昌質詢時的網路片段,咆哮獸也是黃國昌的外號之一,因為他的質詢特色就是非常的兇悍。


SadTalker簡介:

SadTalker也是一個stable diffusion webUI下的外掛,主要功能是將單張的靜態圖像轉成配合口白聲音檔的對嘴動畫,其實已經有許多付費網站提供類似的功能,使用SadTalker的差別在於可單機執行而且免費,但若論畫面精緻度的話,我覺得還是收費網站好一點。

這類收費網站已經有很多,例如比較早期的知名網站是:d-id

,近期也有很多功能類似的網站出現,例如Artflow,Artflow不只是單純的生成對嘴動畫,還能微調畫面結構與運鏡等等。

總而言之,SadTalker算是一個簡單且免費的小工具,可以玩玩,但若真要拿來工作的話還是稍嫌不足,其精細度不如那些付費網站。

另外,就算是使用付費服務產出來的對嘴動畫,多少還是有些不自然的感覺,有種難以言喻的機械感,這就是目前AI的侷限了,相信未來還會持續進步的。

可以參考民視推出的AI新聞,就算是民視特地用來展示表演的這位AI主播,也仍然有著生硬的機械感:



SadTalker使用說明:

1.安裝

SadTalker的安裝與一般的stable diffusion webUI外掛安裝方式相同,直接在extensions頁籤下搜尋SadTalker即可。

raw-image

2.下載模型檔

接著到這個網址下載必要的模型檔:

https://drive.google.com/file/d/1gwWh45pF7aelNP_P78uDJL8Sycep-K7j/view?usp=sharing

下載後是一個zip檔,解壓縮後將這些檔案放到stable-diffusion-webui資料夾\extensions\SadTalker\checkpoints

raw-image


這是個簡單步驟卻害我卡了一下,因為目前大多數的外掛都已經做到非常懶人的全自動安裝了,我沒預料到還要自己動手下載模型,在那邊瞎按了好幾下還以為是壞了。


3.下載ffmpeg

在預設情況下,SadTalker僅支援wav音效檔,若你需要使用到其它聲音檔,例如mp3,那就要使用到ffmpeg插件。

先到下方網址下載ffmpeg檔案:

https://github.com/BtbN/FFmpeg-Builds/releases

raw-image

下載會後會是一個zip檔,將其解壓縮,並記住檔案路徑。

raw-image


接著將此檔案路徑設置到windows的PATH中,如果是windows 10的話,設置步驟如下:


raw-image
raw-image
raw-image
raw-image
raw-image


4.使用

整套都安裝完成後,在stable diffusion webUI的介面中,會出現一個SadTalker的獨立頁籤。

使用方式很簡單,在左側欄位中,分別傳入一個人臉圖像以及一個聲音檔,然後在右側選擇想要的解析度或設定項,點擊Generate就會產出一個影片檔了。

raw-image



結束,今天一樣只是介紹一個小玩具。


raw-image





留言
avatar-img
留言分享你的想法!
黃國昌一定會告你~不一定吧?無傷大雅啊!🤣🤣🤣
巴洛克大叔-avatar-img
發文者
2024/03/20
林燃(創作小說家) 黃國昌這麼忙應該是沒空理我才對
D&Y熊繪生-avatar-img
2024/03/19
感謝大叔分享,Stable Diffusion很可能變成各行各業形象外包裝的標規🤑……
巴洛克大叔-avatar-img
發文者
2024/03/20
D&Y熊繪生 現在算是AI滿街跑了,比較不挑的廠商甚至Ai繪圖畫幾張圖就拿出來當廣告了
黄骥骜-avatar-img
2024/04/19
您好,我是來自goingbus串流媒體平台的業務經理Eliis,不知您有沒有興趣與我合作~
avatar-img
因人廢言
280會員
91內容數
沙龍自介: 雜文派,舉凡AI介紹、科技新知、廢談網誌、小說動漫通通都寫。雖說如此,但目前以AI與科技類文章為主軸,我也不知道怎麼變這樣的,holy 媽祖。 本人不喜歡看長篇文章,也不擅長寫長篇文章,我的意思是:我的優點是廢話很少,看我一篇文不會花你太多時間。
因人廢言的其他內容
2024/02/20
本文介紹ReActor這套AI換臉軟體,它是stable diffusion外掛之一,可以視為deepFake與Lora的簡易替代品,易用好上手。 內容從基礎安裝開始講解,亦包含實際操作過程與圖片範例。 為免侵犯敏感人物的肖象權,內文以川普換與拜登做為例子。
Thumbnail
2024/02/20
本文介紹ReActor這套AI換臉軟體,它是stable diffusion外掛之一,可以視為deepFake與Lora的簡易替代品,易用好上手。 內容從基礎安裝開始講解,亦包含實際操作過程與圖片範例。 為免侵犯敏感人物的肖象權,內文以川普換與拜登做為例子。
Thumbnail
2024/01/26
2024年了,回顧一下我這整年寫過的文章,也回顧一下我用過的那些AI繪圖工具,2023真的是AI爆發的一年,如今AI工具已然滿大街都是,但這個專題我儘量還是本著初心,只介紹自己覺得有用的工具。 本文精選7個即使歷經一年的AI狂潮洗禮後我仍然覺得值得實用的AI繪圖工具。
Thumbnail
2024/01/26
2024年了,回顧一下我這整年寫過的文章,也回顧一下我用過的那些AI繪圖工具,2023真的是AI爆發的一年,如今AI工具已然滿大街都是,但這個專題我儘量還是本著初心,只介紹自己覺得有用的工具。 本文精選7個即使歷經一年的AI狂潮洗禮後我仍然覺得值得實用的AI繪圖工具。
Thumbnail
2023/12/19
今天簡單的介紹一下krea.ai這個網站,主打特色是可以讓你在網站上即時手繪並將你的手繪圖即時轉為美化的AI圖片。 我不知道你的圖畫的爛不爛,反正我是畫的很爛,但這網站可以把我的爛圖救回來而且還很好玩。 krea其實已經出來一陣子了,看一些介紹大致可知它是即時幫你把手繪圖轉成較精緻的AI圖
Thumbnail
2023/12/19
今天簡單的介紹一下krea.ai這個網站,主打特色是可以讓你在網站上即時手繪並將你的手繪圖即時轉為美化的AI圖片。 我不知道你的圖畫的爛不爛,反正我是畫的很爛,但這網站可以把我的爛圖救回來而且還很好玩。 krea其實已經出來一陣子了,看一些介紹大致可知它是即時幫你把手繪圖轉成較精緻的AI圖
Thumbnail
看更多
你可能也想看
Thumbnail
大家好,我是一名眼科醫師,也是一位孩子的媽 身為眼科醫師的我,我知道視力發展對孩子來說有多關鍵。 每到開學季時,診間便充斥著許多憂心忡忡的家屬。近年來看診中,兒童提早近視、眼睛疲勞的案例明顯增加,除了3C使用過度,最常被忽略的,就是照明品質。 然而作為一位媽媽,孩子能在安全、舒適的環境
Thumbnail
大家好,我是一名眼科醫師,也是一位孩子的媽 身為眼科醫師的我,我知道視力發展對孩子來說有多關鍵。 每到開學季時,診間便充斥著許多憂心忡忡的家屬。近年來看診中,兒童提早近視、眼睛疲勞的案例明顯增加,除了3C使用過度,最常被忽略的,就是照明品質。 然而作為一位媽媽,孩子能在安全、舒適的環境
Thumbnail
我的「媽」呀! 母親節即將到來,vocus 邀請你寫下屬於你的「媽」故事——不管是紀錄爆笑的日常,或是一直想對她表達的感謝,又或者,是你這輩子最想聽她說出的一句話。 也歡迎你曬出合照,分享照片背後的點點滴滴 ♥️ 透過創作,將這份情感表達出來吧!🥹
Thumbnail
我的「媽」呀! 母親節即將到來,vocus 邀請你寫下屬於你的「媽」故事——不管是紀錄爆笑的日常,或是一直想對她表達的感謝,又或者,是你這輩子最想聽她說出的一句話。 也歡迎你曬出合照,分享照片背後的點點滴滴 ♥️ 透過創作,將這份情感表達出來吧!🥹
Thumbnail
戰爭是一種環境 你還能講出支持或反對,只是你還沒有被丟進去而已
Thumbnail
戰爭是一種環境 你還能講出支持或反對,只是你還沒有被丟進去而已
Thumbnail
無言無語無言語 忘言忘語忘了妳 想言想語想起妳 瘋言瘋語謝謝妳 學庸95.09.07/09:35
Thumbnail
無言無語無言語 忘言忘語忘了妳 想言想語想起妳 瘋言瘋語謝謝妳 學庸95.09.07/09:35
Thumbnail
我愛您,請把我殺了吧!拼成你喜歡模樣。
Thumbnail
我愛您,請把我殺了吧!拼成你喜歡模樣。
Thumbnail
最近常常看到一個APP的廣告,說是下載了以後,就可以盡情傾述。傾述那些無人可說、無人聆聽、無人了解的心事。
Thumbnail
最近常常看到一個APP的廣告,說是下載了以後,就可以盡情傾述。傾述那些無人可說、無人聆聽、無人了解的心事。
Thumbnail
[大聲點] 什麼? 叫我不要說的太小聲 說大聲一些、清楚一點 好!! 我很棒 我真的很棒 我超級棒的啦
Thumbnail
[大聲點] 什麼? 叫我不要說的太小聲 說大聲一些、清楚一點 好!! 我很棒 我真的很棒 我超級棒的啦
Thumbnail
說書人和雞蛋生日快樂~ 聊聊說書人最近跨越的心魔~
Thumbnail
說書人和雞蛋生日快樂~ 聊聊說書人最近跨越的心魔~
Thumbnail
對方只有達到他對我單向輸出的作用,而本人想和他溝通「我要的說話模式」就沒有起到反應。
Thumbnail
對方只有達到他對我單向輸出的作用,而本人想和他溝通「我要的說話模式」就沒有起到反應。
Thumbnail
鯤:每當我試圖找東西來麻痺自己,總是會搞得自己更清醒。
Thumbnail
鯤:每當我試圖找東西來麻痺自己,總是會搞得自己更清醒。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News