讓 AI 模仿 Gura 唱強風大背頭 | AICover

閱讀時間約 4 分鐘

成果| 直接放開頭

隱隱約約有點 Gura 聲音的味道,但還有很大的提升空間。

使用之聲音素材的相關音樂作者與 VTubers 之連結如下:

<強風大背頭>(強風オールバック)原曲作者 Yukopi 的 YouTube 頻道

「鯊鯊」Gawr Gura(hololive 所屬)的 YouTube 頻道

「菁櫻」 さくらみこ(hololive 所屬)的 YouTube 頻道


流程 | 我的第一次,稱不上是心得/教學

使用的 Google Colab 上的 webUI 介面,其作者的速成教學影片(英文):

頻道在這裡

總之先搞首歌曲的 mp3 或 wav 或 FLAC 檔案

辦法很多,請自己想辦法。

把歌聲和配樂拆成兩個聲音檔

最簡單暴力的方法就是上傳至 X-Minus 網站,讓其自動幫你拆。

但實際上我失敗了

但實際上我失敗了

但實際上 X-Minus 沒有成功幫我拆開,所以我是從 Git 下載了 Ultimate Vocal Remover GUI v5.5.1 安裝檔安裝該軟體:

Git 上的載點

Mediafire 上的載點 (Mirror)

安裝完後打開軟體介面如下:

raw-image

Select Input 是選擇想要拆開的音源檔案

Select Output 是想存檔的路徑

除了 GPU Conversion 是我額外勾選的選項外,其他的選項我全部使用預設值

點擊 Start Processing 就會開始拆分,靜等跑完即可。拆分出來的檔案(預設是 WAV 格式)標示 _(Vocals) 的是歌聲,_(Instrumental) 的是配樂。


準備訓練好的聲音 Cover 模型

這篇不談如何訓練,而是找現成的來用,我是從 Hugging Face 的 QuickWick 處下載的。

因為字母排序之故,Gura的需要點擊頁面底部的 Load more files 數次才會刷出來,然後下載。(如果知道直接搜尋找檔的方法,請務必留言教我,感謝!

下載來的聲音 cover 模型是 .zip 檔案,不用解壓縮。


把聲音模型上傳至 Google Drive

接著要把聲音模型上傳至 Google Drive,以供接著要使用的軟體程式存取。可能其他雲端檔案分享服務也可以,但我沒試過。請注意:如果是放在 Google Drive,該檔案的權限需要設定成只要有分享連結者都可以讀取


壓軸來了 - Easy GUI | 要來搞音樂啦

再來就是前往影片作者提供的 Google Colab webUI 了。

raw-image

別懷疑,打開全是文字幾乎看不到任何圖形介面的地方,沒有跑錯,因為這是安裝頁面。我對 Colab 完全不熟悉,所以我也不知道這是安裝到我的 Google 空間去了還是安裝到本地的哪個地方?

總而言之,流程基本上就是跑每一個步驟 (Step) 的程序,絕大多數就是點擊那個像是播放鍵的小圖示,Step 1. 的在這:

raw-image

點擊後圖示會變中間是方塊的:

raw-image

Step 1.  請等方塊跑完變回三角,就是安裝完成。如果安裝失敗基本上就是系統軟硬體(很可能需要 NVIDIA 的顯卡)不支援,我沒有辦法幫忙。


Step 2. 就是提供剛才上傳至雲端的聲音模型連結,然後按下圖左上的圖示:

raw-image

也是等到圖示從方塊變回三角形,且出現以下訊息時,即代表上傳成功:

raw-image

進入啟動軟體的 Step 3.

raw-image

也是在Step 3.項目下找同樣的三角圖示按

raw-image

這次圖示變方塊後再等一會,上圖顯示程式碼的下方會出現一些程式碼,包括:

raw-image

有用過 Stable Diffusion 的應該對第一行的網址很熟悉,意思是於本地打開。但實際上我用的時候打不開,只能點第二行的於公開網路上打開 webUI 的介面

raw-image

上圖中,各號碼的用途如下:

  1. 聲音模型 - 照理說會出現剛才 Step 2. 中提供之連結的模型。另外,如果想增加模型可以去左上方第二個分頁 Download Model 中操作,然後再回到 Inference 分頁點按 1 右邊的 Refresh
  2. 將稍早前拆分出來的歌聲拖曳至此以上傳 (Upload)
  3. 上傳成功後應該會出現在 3 的下拉式選單中,沒有的話點擊 3 右邊的 Refresh 試試看
  4. Convert,將 2/3 的歌聲轉換成聲音模型的歌聲。
  5. 轉檔成功後會出現在這裡,可點按右上角的 3個點小圖示下載(截圖中尚未出現)


祝大家 Cover 愉快!

82會員
104內容數
筆者探索AI工具時遇到的難題、解方和雜談,不定期更新。
留言0
查看全部
發表第一個留言支持創作者!
黑米BR的沙龍 的其他內容
因為最近 Vlad 頻繁出問題,且Img2Img算一張1024x2048、Denoising Strength 0.45 的圖要整整兩個小時,想說暫時先用 A1111 應急。沒想到 A1111 現在也是半斤八兩,沒有 --no-half --no-half-vae u 一定出問題不說,Img2Img
實作心得 | AI是畫家,使用者是責編 即使套用超強大的插件 ControlNet,在相當於從草稿→完稿的 Img2Img Upscale 過程中,仍時常會損失初始小圖想保留的特色,以及產生奇怪的部分,就好比畫家和責編,對需求的了解總會相隔一層薄霧的差距。 於是就需要花費大量的時間篩選,一張
高解析度寫實風 這是以大主題「婚紗」衍伸各種「人設」的嘗試。 心得①用於放上最滿意的成品。心得②將分享過程秘辛與趣事,以及未選為Amazon上架的相冊內容的圖片。
最近 Stability AI 的 SD-XL 即將完工。原先只有 ComfyUI 能支援,但最近注意到 Vlad 也有支援了,遂嘗試了一下。
因為想嘗試將真實照片中的人物姿態融入成品中,所以在Text2Image(文生圖)階段使用了三種ControlNet:Depth (景深)、reference_only (參照)、lightingBasedPicture_v10 (打光模型)。
這篇很短,僅提供在算圖時於VAE階段%卡死不動的可能解決方案。 方法:關掉Token Merge 祝大家算圖愉快!
因為最近 Vlad 頻繁出問題,且Img2Img算一張1024x2048、Denoising Strength 0.45 的圖要整整兩個小時,想說暫時先用 A1111 應急。沒想到 A1111 現在也是半斤八兩,沒有 --no-half --no-half-vae u 一定出問題不說,Img2Img
實作心得 | AI是畫家,使用者是責編 即使套用超強大的插件 ControlNet,在相當於從草稿→完稿的 Img2Img Upscale 過程中,仍時常會損失初始小圖想保留的特色,以及產生奇怪的部分,就好比畫家和責編,對需求的了解總會相隔一層薄霧的差距。 於是就需要花費大量的時間篩選,一張
高解析度寫實風 這是以大主題「婚紗」衍伸各種「人設」的嘗試。 心得①用於放上最滿意的成品。心得②將分享過程秘辛與趣事,以及未選為Amazon上架的相冊內容的圖片。
最近 Stability AI 的 SD-XL 即將完工。原先只有 ComfyUI 能支援,但最近注意到 Vlad 也有支援了,遂嘗試了一下。
因為想嘗試將真實照片中的人物姿態融入成品中,所以在Text2Image(文生圖)階段使用了三種ControlNet:Depth (景深)、reference_only (參照)、lightingBasedPicture_v10 (打光模型)。
這篇很短,僅提供在算圖時於VAE階段%卡死不動的可能解決方案。 方法:關掉Token Merge 祝大家算圖愉快!
你可能也想看
Google News 追蹤
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
美國總統大選只剩下三天, 我們觀察一整週民調與金融市場的變化(包含賭局), 到本週五下午3:00前為止, 誰是美國總統幾乎大概可以猜到60-70%的機率, 本篇文章就是以大選結局為主軸來討論近期甚至到未來四年美股可能的改變
Thumbnail
前一篇我們有提到「【Generative AI - Prompt篇】Ep.3 讓AI身歷其境的角色提示法」如何催眠AI成為專家,藉著該提示技巧讓AI可以針對該領域進行專業的回答,但…這還不夠,我們還希望AI可以更強大,可以根據我們設計的範本,進行相同規格的輸入與輸出。 我們在前面幾個篇章也玩過一些P
Thumbnail
自從ChatGPT爆紅,每個人都在討論AI,彷彿不跟風討論就會與世界脫節,在這波浪潮中,討論度最高的就是「AI是否會毀滅人類」這個話題。
Thumbnail
今天我這邊提供大家一個方法,讓大家可以自己成為這些AI繪圖的主角,也就是在AI裡面建立屬於你自己個人的模型。Stable Diffusion比較少這部分的教學,是因為這部分的訓練的確比較有一些技術的門檻,我這邊會嘗試用比較簡單的方式讓大家可以一個步驟一個步驟照著做,就能夠達到我們想要達到的結果。
Thumbnail
你是否對工作感到無趣?是否渴望更大的影響力和報酬?那一定要懂得運用槓桿,放大工作效率和影響力!本文分享了三種商業槓桿的方法,其中包括最現代化的AI技術。AI可以讓你省下時間和精力,並提高部門營收成效,從而讓你更加輕鬆地享受生活。如果你希望成為一個高效率的職場人士,快來看看本文的具體實例吧!
Thumbnail
很多人寫英文履歷會遇到不知道怎麼用英文寫自己職務或產業的工作內容,我來分享怎麼用Chat GPT 這個AI軟體幫你找針對你職務內容的英文描述喔~
Thumbnail
當AI開始「自問自答」時,人類提問的能力是否依然這麼重要? 如果詢問AI時代需要怎麼樣的人才?或許目前的標準答案是:「會提問的人」—懂得如何對AI下提示詞,就有更高的機率,從AI獲取更有用的內容。 然而,當AI可以自己提問、自己回答、自己上網找資料的時候呢?「提問的能力」,是否還是依然這麼關鍵呢?
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
美國總統大選只剩下三天, 我們觀察一整週民調與金融市場的變化(包含賭局), 到本週五下午3:00前為止, 誰是美國總統幾乎大概可以猜到60-70%的機率, 本篇文章就是以大選結局為主軸來討論近期甚至到未來四年美股可能的改變
Thumbnail
前一篇我們有提到「【Generative AI - Prompt篇】Ep.3 讓AI身歷其境的角色提示法」如何催眠AI成為專家,藉著該提示技巧讓AI可以針對該領域進行專業的回答,但…這還不夠,我們還希望AI可以更強大,可以根據我們設計的範本,進行相同規格的輸入與輸出。 我們在前面幾個篇章也玩過一些P
Thumbnail
自從ChatGPT爆紅,每個人都在討論AI,彷彿不跟風討論就會與世界脫節,在這波浪潮中,討論度最高的就是「AI是否會毀滅人類」這個話題。
Thumbnail
今天我這邊提供大家一個方法,讓大家可以自己成為這些AI繪圖的主角,也就是在AI裡面建立屬於你自己個人的模型。Stable Diffusion比較少這部分的教學,是因為這部分的訓練的確比較有一些技術的門檻,我這邊會嘗試用比較簡單的方式讓大家可以一個步驟一個步驟照著做,就能夠達到我們想要達到的結果。
Thumbnail
你是否對工作感到無趣?是否渴望更大的影響力和報酬?那一定要懂得運用槓桿,放大工作效率和影響力!本文分享了三種商業槓桿的方法,其中包括最現代化的AI技術。AI可以讓你省下時間和精力,並提高部門營收成效,從而讓你更加輕鬆地享受生活。如果你希望成為一個高效率的職場人士,快來看看本文的具體實例吧!
Thumbnail
很多人寫英文履歷會遇到不知道怎麼用英文寫自己職務或產業的工作內容,我來分享怎麼用Chat GPT 這個AI軟體幫你找針對你職務內容的英文描述喔~
Thumbnail
當AI開始「自問自答」時,人類提問的能力是否依然這麼重要? 如果詢問AI時代需要怎麼樣的人才?或許目前的標準答案是:「會提問的人」—懂得如何對AI下提示詞,就有更高的機率,從AI獲取更有用的內容。 然而,當AI可以自己提問、自己回答、自己上網找資料的時候呢?「提問的能力」,是否還是依然這麼關鍵呢?