Moonvalley,一個簡單的AI影片生成工具。(文字生影片/動畫,txt to movie/anime)

更新於 2024/11/30閱讀時間約 4 分鐘

今天來介紹一個小玩具,可以簡單的以文字生成影片。

AI影片的生成工具已經發展一段時間了,但以往的效果都不太好,所以我一直都沒介紹。而今天介紹的這個Moonvalley總算是可以無中生有的以純文字來產生短影片了,而且效果還算不錯。不需要安裝,也不用特別的設置,直接連上discord即可使用。

先談談舊工具的常見缺點

我個人將AI影片的發展大致分成三個時期,就我看來它已經發展了三個世代,但目前仍然是在很早期的發展階段,實用度相對較低,AI影片的精緻度跟一般AI繪圖是完全無法互相比較的,AI影片還有很大的改善空間,目前就是圖個有趣好玩的程度罷了。

1.影片生影片

在AI影片初次出現時,還無法憑空產出影片,而是必須給予一段影片當做基礎,再藉由AI將這段影片轉化成另一種動畫風格而已。這背後的原理其實很簡單,就是把影片的每個影格抽取出來做圖生圖的動作,完成後再把所有的生成圖片組回去成為一個影片,算是土法煉鋼的做法,而且效果不好,因為與AI繪圖時的狀況相同,每格影片元素都具有不可控的隨機性,這造成畫面閃爍,扭曲,內容置換錯誤等狀況。例如gif2gif就是這類工具,除了gif2gif之外還出現過很多類似的小工具,但那些只是過渡時期的小玩意,其實也不需要深究了。

那些工具我基本是完全沒碰的,所以在此只能上傳別人的生成影片做為範例了,值的注意的是這個影片的畫面算是很穩定也沒有扭曲的太嚴重,作者肯定花了非常多的心思在調整:

2.圖片生影片

當AI影片再進步一點時,出現了可以用單張圖片做為基礎幫你延伸生成動畫的技術了,但此時的生成效果還是不太好,它不會有太豐富的效果,就是很單調的把那張圖的視角及物件稍微抖一抖動一動而已,當然從科技面來看,AI能做到這樣也是很驚人的了,畢竟它是完全不用人工介入就可以理解這個畫面應該要怎麼抖怎麼動。但做為使用者來說,這種成果實在是非常無聊,圖片是會動了,但稱不上是真正的動畫。

為了幫助各位理解我說的「只是把靜態圖片稍微抖一抖,動一動」是什麼意思,我在此上傳一個範例:

3.文字生影片

再往下發展,終於出現真正可以無中生有的文字生成動畫了,在初期使用門檻非常高,prompt要填入非常複雜的數學函式,對於一般人來說完全無法理解與使用,再往下發展才出現一些較友善的工具,可以使用類似AI繪圖的prompt來生成影片。

在前兩個時期都僅僅是把基底影片或圖片變成另一種風格而已,直到現在,可以無中生有的以文字生成影片的階段才算是有了自由創作的樂趣。

但這時的難處就是圖像本身的品質問題了,現在確實可以用純文字生成影片了,但生成結果不太穩定,常常生出歪歪扭扭的醜八怪,以下是其中一個範例:


我上面提到的圖片生影片或是文字生影片,在runway這個網站都可以玩到,雖然這網站不是我今天要談的重點,但這也是個討論度很高並且還在發展中的網站,有興趣可以關注一下,但要注意,它的免費試玩額度是有限的,且玩且珍惜。



Moonvalley

我今天會想介紹Moonvalley的原因很簡單,第一是他簡單易用,第二是目前完全免費,第三是它的生成結果已經算是水準之上了。其實免費是最大的重點,因為這類工具目前都只能算是玩具程度而已,我隨便摸個幾下生幾段醜影片就要收我的錢我可無法接受。

當然我也必須承認,即使是Moonvalley也還有很大的進步空間,太激烈的畫面仍然可能有扭曲閃爍的狀況,但在較靜態的畫面生成結果已經算是很美形了。

使用方式很簡單,直接進入網站:

https://moonvalley.ai/

接著點擊Try the beta,接著會自動進入Discord介面即可使用,使用原則與MidJourney類似,至於Discord怎麼使用算是很基礎的我就不多說了。

raw-image

進入Discord介面後,點選Moonvalley頻道裡的任一個new-mooon房間:

raw-image

輸入指令/create就會自動跳出輸入介面,總共有三個項目要填:

prompt:填入要生成影片的指導文字

style:圖片風格,這邊是選單式的直接點選即可,總共有五種風格。

raw-image

duration:影片長度,也是選單式的,共有三種長度,越久的影片生成時間越久。但就算是最長的影片也只有三秒而已。

raw-image

再往下還有其它更細部的項目可以設定,有興趣的可以再往下研究。

以下也提供一段Moonvalley的生成範例,裡面包含了三段影片,前兩段是較為靜態的可以看出生成結果很穩定,並且不需要基礎圖片生出的人物外觀也很正常,而最後一段是較為動態的,可以發現扭曲變形的症狀仍然是有,但它已經算是相對表現不錯的了。



我個人的建議也是把Moonvalley當玩具玩玩就好,不用太認真,因為這還不是AI影片的終點,它仍然在發展中。








avatar-img
276會員
90內容數
沙龍自介: 雜文派,舉凡AI介紹、科技新知、廢談網誌、小說動漫通通都寫。雖說如此,但目前以AI與科技類文章為主軸,我也不知道怎麼變這樣的,holy 媽祖。 本人不喜歡看長篇文章,也不擅長寫長篇文章,我的意思是:我的優點是廢話很少,看我一篇文不會花你太多時間。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
因人廢言 的其他內容
DALL·E 3是OpenAI近期推出的繪圖模型,相對於舊版可以說是進步的非常非常多。 目前在微軟的bing與chatGPT Plus中都可以試用DALL·E 3,這篇文章除了簡介DALL·E 3的進步與特性之外,也比較在bing與chatGPT Plus這兩個平台中使用DALL·E 3有何不同?有
幾乎可以說是跟stable diffusion一體同命的ControlNet的XL版本總算是上線了,算是為SDXL補上最關鍵一塊地圖,以下快速的來瀏覽一下它的安裝方式與功能吧。
stable-diffusion-webui AUTOMATIC1111在近期更新到1.6版了,我在本文中列出較重要的8個有感且實用的更新項目。 而那些較為底層的,或是專給高手使用的更新項目我就不細說了。
tensor.art是一個很新的AI繪圖網站,目前還沒看到有什麼廣告或是業配,目前僅在Stable Diffusion 台灣社群v2社團看到一兩篇廣告跟介紹而已。 目前還沒有具體的營利模式,每天有100個繪圖點可以畫100張圖,但也因為還沒有營利模式,所以就算你想花錢買點數也沒得買。
這篇文章講解在stable diffusion webui上安裝SDXL。 在stable diffusion webui上使用SDXL的步驟不難,比較要注意的是SDXL的幾個重點差異,你要先依這個差異來評估自己是否要升級,以免白忙一場。
其實我消息算是有點後知後覺,才剛寫完SDXL0.9的消息後,才知道其實SDXL 1.0也發佈了。 有個小小的差別是,目前想試用SDXL 1.0稍微麻煩一點點,它只能在discord中使用。目前還是免費使用,如果它的經營模式跟midjourney一樣的話,應該不久後就要收費了。
DALL·E 3是OpenAI近期推出的繪圖模型,相對於舊版可以說是進步的非常非常多。 目前在微軟的bing與chatGPT Plus中都可以試用DALL·E 3,這篇文章除了簡介DALL·E 3的進步與特性之外,也比較在bing與chatGPT Plus這兩個平台中使用DALL·E 3有何不同?有
幾乎可以說是跟stable diffusion一體同命的ControlNet的XL版本總算是上線了,算是為SDXL補上最關鍵一塊地圖,以下快速的來瀏覽一下它的安裝方式與功能吧。
stable-diffusion-webui AUTOMATIC1111在近期更新到1.6版了,我在本文中列出較重要的8個有感且實用的更新項目。 而那些較為底層的,或是專給高手使用的更新項目我就不細說了。
tensor.art是一個很新的AI繪圖網站,目前還沒看到有什麼廣告或是業配,目前僅在Stable Diffusion 台灣社群v2社團看到一兩篇廣告跟介紹而已。 目前還沒有具體的營利模式,每天有100個繪圖點可以畫100張圖,但也因為還沒有營利模式,所以就算你想花錢買點數也沒得買。
這篇文章講解在stable diffusion webui上安裝SDXL。 在stable diffusion webui上使用SDXL的步驟不難,比較要注意的是SDXL的幾個重點差異,你要先依這個差異來評估自己是否要升級,以免白忙一場。
其實我消息算是有點後知後覺,才剛寫完SDXL0.9的消息後,才知道其實SDXL 1.0也發佈了。 有個小小的差別是,目前想試用SDXL 1.0稍微麻煩一點點,它只能在discord中使用。目前還是免費使用,如果它的經營模式跟midjourney一樣的話,應該不久後就要收費了。
你可能也想看
Google News 追蹤
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
一次校外教學的回程...... 🧒:😭😭(大哭的那種,死活不想上車) (哭的理由又是另外一個故事了) 😎:看著我!毛毛看著我!(手動抱他上車) 🧒:你不要碰我 (他蠻高的,加上已經二年級,弱女子的我實在抱不動不斷蠕動的他) (另一位教練帥氣救援,終於把他扛上車,十分鐘也就這樣過
Thumbnail
您將要讀到的盆栽凳並不花哨,但非常實用。 它也非常容易構建和使用。 只不過它沒有腿!不要驚慌,擁有無腿盆栽長凳實際上是一個好處。 我稍後會談到這一點。 本文中描述的盆栽凳實際上與我們在後院苗圃中使用多年的盆栽凳完全相同, 它對我們很有用,盆栽了數以萬計的植物。 我喜歡
Thumbnail
# 簡介 身為一位專注於 Vue.js 的前端開發者,這是我第一次嘗試構建 Flutter 網頁應用。讓我們開始吧! ## 第一次嘗試 ### 第一步:創建一個 Flutter 應用 首先,通過運行以下命令來創建一個新的 Flutter 項目: ```sh flutter
Thumbnail
在秋紅谷靜心進行靈性體驗。透過專注觀察與氣的感受,學會放鬆練習,改善情緒波動,進而整合與調頻陰性能量。
Thumbnail
今天來介紹一個小玩具,可以簡單的以文字生成影片。 AI影片的生成工具已經發展一段時間了,但以往的效果都不太好,所以我一直都沒介紹。而今天介紹的這個Moonvalley總算是可以無中生有的以純文字來產生短影片了,而且效果還算不錯。 先談談舊工具的常見缺點 我個人將AI影片的發展大致分成三個時期,
從此時此刻起,保持一顆感恩的心,只允許自己往好的方向前進,用樂觀去面對生活中一切大小事物。 勇於嘗試,即使搞砸了也不要難過,再也沒有時間、心力是留給難過沮喪的。 如果覺得累就去睡覺休息,如果餓了就去吃腦海中第一個浮現的食物。 不用管對錯,這是我自己的目標,我說了算🙂
23039 一個簡單的好人 作者: 許峰源(法羽老師) 這是法羽老師再次的鉅著, 透過去豐富的人生歷練印證了”將自己活成一到光”的最佳範例; 在目前複雜且高壓的社會中注入了一股純粹的光, 值得推薦閱讀. 書摘: 1. 一個心中沒有敵人的人,是最強大的, 因為”善良”. 2. 幫助別人最大的回報, 是
Thumbnail
這集跟大家初步介紹Next.js和如何安裝與設置最後製作一個作品集(Portfolio) 如果對設計有興趣的朋友們可以看以下連結文章來學習Figma設計軟件 https://vocus.cc/article/645c733dfd89780001ffe890
Thumbnail
想要投資一間公司,我們會想要知道它是否處於成長階段,也就是它的營收是否持續增加,它的產品或服務是否有市場需求,它的股價是否有上漲的空間。那麼,你要怎麼判斷呢? 其實,有一個很簡單又有效的指標。
一個簡單的事實: 現在的自己 是過去的妳努力跨出無數個小步伐才到達的成就 試著跨出一小步,再一小步... 最終妳會到達的... 就像妳曾經做過無數次的那樣 另一個事實: 現在的妳已經會的更多 也更有自信和方法去創造屬於自己的現實 這些都是以前的妳無法想像的 記得,邁出ㄧ小步 好過裹足不前 Small
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
一次校外教學的回程...... 🧒:😭😭(大哭的那種,死活不想上車) (哭的理由又是另外一個故事了) 😎:看著我!毛毛看著我!(手動抱他上車) 🧒:你不要碰我 (他蠻高的,加上已經二年級,弱女子的我實在抱不動不斷蠕動的他) (另一位教練帥氣救援,終於把他扛上車,十分鐘也就這樣過
Thumbnail
您將要讀到的盆栽凳並不花哨,但非常實用。 它也非常容易構建和使用。 只不過它沒有腿!不要驚慌,擁有無腿盆栽長凳實際上是一個好處。 我稍後會談到這一點。 本文中描述的盆栽凳實際上與我們在後院苗圃中使用多年的盆栽凳完全相同, 它對我們很有用,盆栽了數以萬計的植物。 我喜歡
Thumbnail
# 簡介 身為一位專注於 Vue.js 的前端開發者,這是我第一次嘗試構建 Flutter 網頁應用。讓我們開始吧! ## 第一次嘗試 ### 第一步:創建一個 Flutter 應用 首先,通過運行以下命令來創建一個新的 Flutter 項目: ```sh flutter
Thumbnail
在秋紅谷靜心進行靈性體驗。透過專注觀察與氣的感受,學會放鬆練習,改善情緒波動,進而整合與調頻陰性能量。
Thumbnail
今天來介紹一個小玩具,可以簡單的以文字生成影片。 AI影片的生成工具已經發展一段時間了,但以往的效果都不太好,所以我一直都沒介紹。而今天介紹的這個Moonvalley總算是可以無中生有的以純文字來產生短影片了,而且效果還算不錯。 先談談舊工具的常見缺點 我個人將AI影片的發展大致分成三個時期,
從此時此刻起,保持一顆感恩的心,只允許自己往好的方向前進,用樂觀去面對生活中一切大小事物。 勇於嘗試,即使搞砸了也不要難過,再也沒有時間、心力是留給難過沮喪的。 如果覺得累就去睡覺休息,如果餓了就去吃腦海中第一個浮現的食物。 不用管對錯,這是我自己的目標,我說了算🙂
23039 一個簡單的好人 作者: 許峰源(法羽老師) 這是法羽老師再次的鉅著, 透過去豐富的人生歷練印證了”將自己活成一到光”的最佳範例; 在目前複雜且高壓的社會中注入了一股純粹的光, 值得推薦閱讀. 書摘: 1. 一個心中沒有敵人的人,是最強大的, 因為”善良”. 2. 幫助別人最大的回報, 是
Thumbnail
這集跟大家初步介紹Next.js和如何安裝與設置最後製作一個作品集(Portfolio) 如果對設計有興趣的朋友們可以看以下連結文章來學習Figma設計軟件 https://vocus.cc/article/645c733dfd89780001ffe890
Thumbnail
想要投資一間公司,我們會想要知道它是否處於成長階段,也就是它的營收是否持續增加,它的產品或服務是否有市場需求,它的股價是否有上漲的空間。那麼,你要怎麼判斷呢? 其實,有一個很簡單又有效的指標。
一個簡單的事實: 現在的自己 是過去的妳努力跨出無數個小步伐才到達的成就 試著跨出一小步,再一小步... 最終妳會到達的... 就像妳曾經做過無數次的那樣 另一個事實: 現在的妳已經會的更多 也更有自信和方法去創造屬於自己的現實 這些都是以前的妳無法想像的 記得,邁出ㄧ小步 好過裹足不前 Small