Moonvalley,一個簡單的AI影片生成工具。(文字生影片/動畫,txt to movie/anime)

閱讀時間約 4 分鐘

今天來介紹一個小玩具,可以簡單的以文字生成影片。

AI影片的生成工具已經發展一段時間了,但以往的效果都不太好,所以我一直都沒介紹。而今天介紹的這個Moonvalley總算是可以無中生有的以純文字來產生短影片了,而且效果還算不錯。不需要安裝,也不用特別的設置,直接連上discord即可使用。

先談談舊工具的常見缺點

我個人將AI影片的發展大致分成三個時期,就我看來它已經發展了三個世代,但目前仍然是在很早期的發展階段,實用度相對較低,AI影片的精緻度跟一般AI繪圖是完全無法互相比較的,AI影片還有很大的改善空間,目前就是圖個有趣好玩的程度罷了。

1.影片生影片

在AI影片初次出現時,還無法憑空產出影片,而是必須給予一段影片當做基礎,再藉由AI將這段影片轉化成另一種動畫風格而已。這背後的原理其實很簡單,就是把影片的每個影格抽取出來做圖生圖的動作,完成後再把所有的生成圖片組回去成為一個影片,算是土法煉鋼的做法,而且效果不好,因為與AI繪圖時的狀況相同,每格影片元素都具有不可控的隨機性,這造成畫面閃爍,扭曲,內容置換錯誤等狀況。例如gif2gif就是這類工具,除了gif2gif之外還出現過很多類似的小工具,但那些只是過渡時期的小玩意,其實也不需要深究了。

那些工具我基本是完全沒碰的,所以在此只能上傳別人的生成影片做為範例了,值的注意的是這個影片的畫面算是很穩定也沒有扭曲的太嚴重,作者肯定花了非常多的心思在調整:

2.圖片生影片

當AI影片再進步一點時,出現了可以用單張圖片做為基礎幫你延伸生成動畫的技術了,但此時的生成效果還是不太好,它不會有太豐富的效果,就是很單調的把那張圖的視角及物件稍微抖一抖動一動而已,當然從科技面來看,AI能做到這樣也是很驚人的了,畢竟它是完全不用人工介入就可以理解這個畫面應該要怎麼抖怎麼動。但做為使用者來說,這種成果實在是非常無聊,圖片是會動了,但稱不上是真正的動畫。

為了幫助各位理解我說的「只是把靜態圖片稍微抖一抖,動一動」是什麼意思,我在此上傳一個範例:

3.文字生影片

再往下發展,終於出現真正可以無中生有的文字生成動畫了,在初期使用門檻非常高,prompt要填入非常複雜的數學函式,對於一般人來說完全無法理解與使用,再往下發展才出現一些較友善的工具,可以使用類似AI繪圖的prompt來生成影片。

在前兩個時期都僅僅是把基底影片或圖片變成另一種風格而已,直到現在,可以無中生有的以文字生成影片的階段才算是有了自由創作的樂趣。

但這時的難處就是圖像本身的品質問題了,現在確實可以用純文字生成影片了,但生成結果不太穩定,常常生出歪歪扭扭的醜八怪,以下是其中一個範例:


我上面提到的圖片生影片或是文字生影片,在runway這個網站都可以玩到,雖然這網站不是我今天要談的重點,但這也是個討論度很高並且還在發展中的網站,有興趣可以關注一下,但要注意,它的免費試玩額度是有限的,且玩且珍惜。



Moonvalley

我今天會想介紹Moonvalley的原因很簡單,第一是他簡單易用,第二是目前完全免費,第三是它的生成結果已經算是水準之上了。其實免費是最大的重點,因為這類工具目前都只能算是玩具程度而已,我隨便摸個幾下生幾段醜影片就要收我的錢我可無法接受。

當然我也必須承認,即使是Moonvalley也還有很大的進步空間,太激烈的畫面仍然可能有扭曲閃爍的狀況,但在較靜態的畫面生成結果已經算是很美形了。

使用方式很簡單,直接進入網站:

https://moonvalley.ai/

接著點擊Try the beta,接著會自動進入Discord介面即可使用,使用原則與MidJourney類似,至於Discord怎麼使用算是很基礎的我就不多說了。

raw-image

進入Discord介面後,點選Moonvalley頻道裡的任一個new-mooon房間:

raw-image

輸入指令/create就會自動跳出輸入介面,總共有三個項目要填:

prompt:填入要生成影片的指導文字

style:圖片風格,這邊是選單式的直接點選即可,總共有五種風格。

raw-image

duration:影片長度,也是選單式的,共有三種長度,越久的影片生成時間越久。但就算是最長的影片也只有三秒而已。

raw-image

再往下還有其它更細部的項目可以設定,有興趣的可以再往下研究。

以下也提供一段Moonvalley的生成範例,裡面包含了三段影片,前兩段是較為靜態的可以看出生成結果很穩定,並且不需要基礎圖片生出的人物外觀也很正常,而最後一段是較為動態的,可以發現扭曲變形的症狀仍然是有,但它已經算是相對表現不錯的了。



我個人的建議也是把Moonvalley當玩具玩玩就好,不用太認真,因為這還不是AI影片的終點,它仍然在發展中。








275會員
90內容數
沙龍自介: 雜文派,舉凡AI介紹、科技新知、廢談網誌、小說動漫通通都寫。雖說如此,但目前以AI與科技類文章為主軸,我也不知道怎麼變這樣的,holy 媽祖。 本人不喜歡看長篇文章,也不擅長寫長篇文章,我的意思是:我的優點是廢話很少,看我一篇文不會花你太多時間。
留言0
查看全部
發表第一個留言支持創作者!
因人廢言 的其他內容
DALL·E 3是OpenAI近期推出的繪圖模型,相對於舊版可以說是進步的非常非常多。 目前在微軟的bing與chatGPT Plus中都可以試用DALL·E 3,這篇文章除了簡介DALL·E 3的進步與特性之外,也比較在bing與chatGPT Plus這兩個平台中使用DALL·E 3有何不同?有
幾乎可以說是跟stable diffusion一體同命的ControlNet的XL版本總算是上線了,算是為SDXL補上最關鍵一塊地圖,以下快速的來瀏覽一下它的安裝方式與功能吧。
stable-diffusion-webui AUTOMATIC1111在近期更新到1.6版了,我在本文中列出較重要的8個有感且實用的更新項目。 而那些較為底層的,或是專給高手使用的更新項目我就不細說了。
tensor.art是一個很新的AI繪圖網站,目前還沒看到有什麼廣告或是業配,目前僅在Stable Diffusion 台灣社群v2社團看到一兩篇廣告跟介紹而已。 目前還沒有具體的營利模式,每天有100個繪圖點可以畫100張圖,但也因為還沒有營利模式,所以就算你想花錢買點數也沒得買。
這篇文章講解在stable diffusion webui上安裝SDXL。 在stable diffusion webui上使用SDXL的步驟不難,比較要注意的是SDXL的幾個重點差異,你要先依這個差異來評估自己是否要升級,以免白忙一場。
其實我消息算是有點後知後覺,才剛寫完SDXL0.9的消息後,才知道其實SDXL 1.0也發佈了。 有個小小的差別是,目前想試用SDXL 1.0稍微麻煩一點點,它只能在discord中使用。目前還是免費使用,如果它的經營模式跟midjourney一樣的話,應該不久後就要收費了。
DALL·E 3是OpenAI近期推出的繪圖模型,相對於舊版可以說是進步的非常非常多。 目前在微軟的bing與chatGPT Plus中都可以試用DALL·E 3,這篇文章除了簡介DALL·E 3的進步與特性之外,也比較在bing與chatGPT Plus這兩個平台中使用DALL·E 3有何不同?有
幾乎可以說是跟stable diffusion一體同命的ControlNet的XL版本總算是上線了,算是為SDXL補上最關鍵一塊地圖,以下快速的來瀏覽一下它的安裝方式與功能吧。
stable-diffusion-webui AUTOMATIC1111在近期更新到1.6版了,我在本文中列出較重要的8個有感且實用的更新項目。 而那些較為底層的,或是專給高手使用的更新項目我就不細說了。
tensor.art是一個很新的AI繪圖網站,目前還沒看到有什麼廣告或是業配,目前僅在Stable Diffusion 台灣社群v2社團看到一兩篇廣告跟介紹而已。 目前還沒有具體的營利模式,每天有100個繪圖點可以畫100張圖,但也因為還沒有營利模式,所以就算你想花錢買點數也沒得買。
這篇文章講解在stable diffusion webui上安裝SDXL。 在stable diffusion webui上使用SDXL的步驟不難,比較要注意的是SDXL的幾個重點差異,你要先依這個差異來評估自己是否要升級,以免白忙一場。
其實我消息算是有點後知後覺,才剛寫完SDXL0.9的消息後,才知道其實SDXL 1.0也發佈了。 有個小小的差別是,目前想試用SDXL 1.0稍微麻煩一點點,它只能在discord中使用。目前還是免費使用,如果它的經營模式跟midjourney一樣的話,應該不久後就要收費了。
你可能也想看
Google News 追蹤
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
美國總統大選只剩下三天, 我們觀察一整週民調與金融市場的變化(包含賭局), 到本週五下午3:00前為止, 誰是美國總統幾乎大概可以猜到60-70%的機率, 本篇文章就是以大選結局為主軸來討論近期甚至到未來四年美股可能的改變
Thumbnail
Faker昨天真的太扯了,中國主播王多多點評的話更是精妙,分享給各位 王多多的點評 「Faker是我們的處境,他是LPL永遠繞不開的一個人和話題,所以我們特別渴望在決賽跟他相遇,去直面我們的處境。 我們曾經稱他為最高的山,最長的河,以為山海就是盡頭,可是Faker用他28歲的年齡...
從此時此刻起,保持一顆感恩的心,只允許自己往好的方向前進,用樂觀去面對生活中一切大小事物。 勇於嘗試,即使搞砸了也不要難過,再也沒有時間、心力是留給難過沮喪的。 如果覺得累就去睡覺休息,如果餓了就去吃腦海中第一個浮現的食物。 不用管對錯,這是我自己的目標,我說了算🙂
23039 一個簡單的好人 作者: 許峰源(法羽老師) 這是法羽老師再次的鉅著, 透過去豐富的人生歷練印證了”將自己活成一到光”的最佳範例; 在目前複雜且高壓的社會中注入了一股純粹的光, 值得推薦閱讀. 書摘: 1. 一個心中沒有敵人的人,是最強大的, 因為”善良”. 2. 幫助別人最大的回報, 是
Thumbnail
這集跟大家初步介紹Next.js和如何安裝與設置最後製作一個作品集(Portfolio) 如果對設計有興趣的朋友們可以看以下連結文章來學習Figma設計軟件 https://vocus.cc/article/645c733dfd89780001ffe890
Thumbnail
想要投資一間公司,我們會想要知道它是否處於成長階段,也就是它的營收是否持續增加,它的產品或服務是否有市場需求,它的股價是否有上漲的空間。那麼,你要怎麼判斷呢? 其實,有一個很簡單又有效的指標。
一個簡單的事實: 現在的自己 是過去的妳努力跨出無數個小步伐才到達的成就 試著跨出一小步,再一小步... 最終妳會到達的... 就像妳曾經做過無數次的那樣 另一個事實: 現在的妳已經會的更多 也更有自信和方法去創造屬於自己的現實 這些都是以前的妳無法想像的 記得,邁出ㄧ小步 好過裹足不前 Small
Thumbnail
無數的相遇與無數的離別,總有些令人無法忘懷的人、事、物,無論你遇到的是什麼,每一段的邂逅都應該好好去珍惜。
Thumbnail
刑事案件從告訴狀開始,交由檢察官偵辦,而檢察官接到訴狀之後要展開調查,而檢察官會親自調查嗎?他會交由警察進行實質的調查問訊,交給調查局經由或警察的初步報告,再傳喚告訴人、被告進行偵查庭,從中得到庭上的筆錄自白,或者從告訴人中得到的證據,最終由這些過程中所得到的資訊,作為起訴或不起訴的依據,但是檢察官
Thumbnail
E 最近版本裏很多討論搶隊友、配隊的問題。 其實這些問題都可以簡化一下,畢竟什麽元素反應、什麽機製配合到最後都要回歸到兩個問題:傷害構成上是否撐起了最基礎的攻擊力乘區?是否保證了生存(奶)的能力? 最終其實也就是指向了提瓦特唯一的真神——點贊哥。 之前偶有暴論,深淵配隊其實就是找一隊點贊帶,再找
人類一個簡單的念頭可以創造城市。一個念頭可以改變世界,重寫規則。 A single idea from the human mind can build cities. An idea can transform the world and rewrite all the rules. -第2612
有錢的人可以投機,錢少的人不可以投機,根本沒錢的人必須投機 。                《一個投機者的告白》科斯托蘭尼 為什麼要做投資? 因為光靠普遍的工資收入累積本金是有難度的。 如果你不是年收入在全台灣前10%的族群,你覺得無腦存多久錢可以達成你想要的目標?
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
美國總統大選只剩下三天, 我們觀察一整週民調與金融市場的變化(包含賭局), 到本週五下午3:00前為止, 誰是美國總統幾乎大概可以猜到60-70%的機率, 本篇文章就是以大選結局為主軸來討論近期甚至到未來四年美股可能的改變
Thumbnail
Faker昨天真的太扯了,中國主播王多多點評的話更是精妙,分享給各位 王多多的點評 「Faker是我們的處境,他是LPL永遠繞不開的一個人和話題,所以我們特別渴望在決賽跟他相遇,去直面我們的處境。 我們曾經稱他為最高的山,最長的河,以為山海就是盡頭,可是Faker用他28歲的年齡...
從此時此刻起,保持一顆感恩的心,只允許自己往好的方向前進,用樂觀去面對生活中一切大小事物。 勇於嘗試,即使搞砸了也不要難過,再也沒有時間、心力是留給難過沮喪的。 如果覺得累就去睡覺休息,如果餓了就去吃腦海中第一個浮現的食物。 不用管對錯,這是我自己的目標,我說了算🙂
23039 一個簡單的好人 作者: 許峰源(法羽老師) 這是法羽老師再次的鉅著, 透過去豐富的人生歷練印證了”將自己活成一到光”的最佳範例; 在目前複雜且高壓的社會中注入了一股純粹的光, 值得推薦閱讀. 書摘: 1. 一個心中沒有敵人的人,是最強大的, 因為”善良”. 2. 幫助別人最大的回報, 是
Thumbnail
這集跟大家初步介紹Next.js和如何安裝與設置最後製作一個作品集(Portfolio) 如果對設計有興趣的朋友們可以看以下連結文章來學習Figma設計軟件 https://vocus.cc/article/645c733dfd89780001ffe890
Thumbnail
想要投資一間公司,我們會想要知道它是否處於成長階段,也就是它的營收是否持續增加,它的產品或服務是否有市場需求,它的股價是否有上漲的空間。那麼,你要怎麼判斷呢? 其實,有一個很簡單又有效的指標。
一個簡單的事實: 現在的自己 是過去的妳努力跨出無數個小步伐才到達的成就 試著跨出一小步,再一小步... 最終妳會到達的... 就像妳曾經做過無數次的那樣 另一個事實: 現在的妳已經會的更多 也更有自信和方法去創造屬於自己的現實 這些都是以前的妳無法想像的 記得,邁出ㄧ小步 好過裹足不前 Small
Thumbnail
無數的相遇與無數的離別,總有些令人無法忘懷的人、事、物,無論你遇到的是什麼,每一段的邂逅都應該好好去珍惜。
Thumbnail
刑事案件從告訴狀開始,交由檢察官偵辦,而檢察官接到訴狀之後要展開調查,而檢察官會親自調查嗎?他會交由警察進行實質的調查問訊,交給調查局經由或警察的初步報告,再傳喚告訴人、被告進行偵查庭,從中得到庭上的筆錄自白,或者從告訴人中得到的證據,最終由這些過程中所得到的資訊,作為起訴或不起訴的依據,但是檢察官
Thumbnail
E 最近版本裏很多討論搶隊友、配隊的問題。 其實這些問題都可以簡化一下,畢竟什麽元素反應、什麽機製配合到最後都要回歸到兩個問題:傷害構成上是否撐起了最基礎的攻擊力乘區?是否保證了生存(奶)的能力? 最終其實也就是指向了提瓦特唯一的真神——點贊哥。 之前偶有暴論,深淵配隊其實就是找一隊點贊帶,再找
人類一個簡單的念頭可以創造城市。一個念頭可以改變世界,重寫規則。 A single idea from the human mind can build cities. An idea can transform the world and rewrite all the rules. -第2612
有錢的人可以投機,錢少的人不可以投機,根本沒錢的人必須投機 。                《一個投機者的告白》科斯托蘭尼 為什麼要做投資? 因為光靠普遍的工資收入累積本金是有難度的。 如果你不是年收入在全台灣前10%的族群,你覺得無腦存多久錢可以達成你想要的目標?