Moonvalley,一個簡單的AI影片生成工具。(文字生影片/動畫,txt to movie/anime)

更新於 發佈於 閱讀時間約 4 分鐘

今天來介紹一個小玩具,可以簡單的以文字生成影片。

AI影片的生成工具已經發展一段時間了,但以往的效果都不太好,所以我一直都沒介紹。而今天介紹的這個Moonvalley總算是可以無中生有的以純文字來產生短影片了,而且效果還算不錯。不需要安裝,也不用特別的設置,直接連上discord即可使用。

先談談舊工具的常見缺點

我個人將AI影片的發展大致分成三個時期,就我看來它已經發展了三個世代,但目前仍然是在很早期的發展階段,實用度相對較低,AI影片的精緻度跟一般AI繪圖是完全無法互相比較的,AI影片還有很大的改善空間,目前就是圖個有趣好玩的程度罷了。

1.影片生影片

在AI影片初次出現時,還無法憑空產出影片,而是必須給予一段影片當做基礎,再藉由AI將這段影片轉化成另一種動畫風格而已。這背後的原理其實很簡單,就是把影片的每個影格抽取出來做圖生圖的動作,完成後再把所有的生成圖片組回去成為一個影片,算是土法煉鋼的做法,而且效果不好,因為與AI繪圖時的狀況相同,每格影片元素都具有不可控的隨機性,這造成畫面閃爍,扭曲,內容置換錯誤等狀況。例如gif2gif就是這類工具,除了gif2gif之外還出現過很多類似的小工具,但那些只是過渡時期的小玩意,其實也不需要深究了。

那些工具我基本是完全沒碰的,所以在此只能上傳別人的生成影片做為範例了,值的注意的是這個影片的畫面算是很穩定也沒有扭曲的太嚴重,作者肯定花了非常多的心思在調整:

2.圖片生影片

當AI影片再進步一點時,出現了可以用單張圖片做為基礎幫你延伸生成動畫的技術了,但此時的生成效果還是不太好,它不會有太豐富的效果,就是很單調的把那張圖的視角及物件稍微抖一抖動一動而已,當然從科技面來看,AI能做到這樣也是很驚人的了,畢竟它是完全不用人工介入就可以理解這個畫面應該要怎麼抖怎麼動。但做為使用者來說,這種成果實在是非常無聊,圖片是會動了,但稱不上是真正的動畫。

為了幫助各位理解我說的「只是把靜態圖片稍微抖一抖,動一動」是什麼意思,我在此上傳一個範例:

3.文字生影片

再往下發展,終於出現真正可以無中生有的文字生成動畫了,在初期使用門檻非常高,prompt要填入非常複雜的數學函式,對於一般人來說完全無法理解與使用,再往下發展才出現一些較友善的工具,可以使用類似AI繪圖的prompt來生成影片。

在前兩個時期都僅僅是把基底影片或圖片變成另一種風格而已,直到現在,可以無中生有的以文字生成影片的階段才算是有了自由創作的樂趣。

但這時的難處就是圖像本身的品質問題了,現在確實可以用純文字生成影片了,但生成結果不太穩定,常常生出歪歪扭扭的醜八怪,以下是其中一個範例:


我上面提到的圖片生影片或是文字生影片,在runway這個網站都可以玩到,雖然這網站不是我今天要談的重點,但這也是個討論度很高並且還在發展中的網站,有興趣可以關注一下,但要注意,它的免費試玩額度是有限的,且玩且珍惜。



Moonvalley

我今天會想介紹Moonvalley的原因很簡單,第一是他簡單易用,第二是目前完全免費,第三是它的生成結果已經算是水準之上了。其實免費是最大的重點,因為這類工具目前都只能算是玩具程度而已,我隨便摸個幾下生幾段醜影片就要收我的錢我可無法接受。

當然我也必須承認,即使是Moonvalley也還有很大的進步空間,太激烈的畫面仍然可能有扭曲閃爍的狀況,但在較靜態的畫面生成結果已經算是很美形了。

使用方式很簡單,直接進入網站:

https://moonvalley.ai/

接著點擊Try the beta,接著會自動進入Discord介面即可使用,使用原則與MidJourney類似,至於Discord怎麼使用算是很基礎的我就不多說了。

raw-image

進入Discord介面後,點選Moonvalley頻道裡的任一個new-mooon房間:

raw-image

輸入指令/create就會自動跳出輸入介面,總共有三個項目要填:

prompt:填入要生成影片的指導文字

style:圖片風格,這邊是選單式的直接點選即可,總共有五種風格。

raw-image

duration:影片長度,也是選單式的,共有三種長度,越久的影片生成時間越久。但就算是最長的影片也只有三秒而已。

raw-image

再往下還有其它更細部的項目可以設定,有興趣的可以再往下研究。

以下也提供一段Moonvalley的生成範例,裡面包含了三段影片,前兩段是較為靜態的可以看出生成結果很穩定,並且不需要基礎圖片生出的人物外觀也很正常,而最後一段是較為動態的,可以發現扭曲變形的症狀仍然是有,但它已經算是相對表現不錯的了。



我個人的建議也是把Moonvalley當玩具玩玩就好,不用太認真,因為這還不是AI影片的終點,它仍然在發展中。








avatar-img
277會員
90內容數
沙龍自介: 雜文派,舉凡AI介紹、科技新知、廢談網誌、小說動漫通通都寫。雖說如此,但目前以AI與科技類文章為主軸,我也不知道怎麼變這樣的,holy 媽祖。 本人不喜歡看長篇文章,也不擅長寫長篇文章,我的意思是:我的優點是廢話很少,看我一篇文不會花你太多時間。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
因人廢言 的其他內容
DALL·E 3是OpenAI近期推出的繪圖模型,相對於舊版可以說是進步的非常非常多。 目前在微軟的bing與chatGPT Plus中都可以試用DALL·E 3,這篇文章除了簡介DALL·E 3的進步與特性之外,也比較在bing與chatGPT Plus這兩個平台中使用DALL·E 3有何不同?有
幾乎可以說是跟stable diffusion一體同命的ControlNet的XL版本總算是上線了,算是為SDXL補上最關鍵一塊地圖,以下快速的來瀏覽一下它的安裝方式與功能吧。
stable-diffusion-webui AUTOMATIC1111在近期更新到1.6版了,我在本文中列出較重要的8個有感且實用的更新項目。 而那些較為底層的,或是專給高手使用的更新項目我就不細說了。
tensor.art是一個很新的AI繪圖網站,目前還沒看到有什麼廣告或是業配,目前僅在Stable Diffusion 台灣社群v2社團看到一兩篇廣告跟介紹而已。 目前還沒有具體的營利模式,每天有100個繪圖點可以畫100張圖,但也因為還沒有營利模式,所以就算你想花錢買點數也沒得買。
這篇文章講解在stable diffusion webui上安裝SDXL。 在stable diffusion webui上使用SDXL的步驟不難,比較要注意的是SDXL的幾個重點差異,你要先依這個差異來評估自己是否要升級,以免白忙一場。
其實我消息算是有點後知後覺,才剛寫完SDXL0.9的消息後,才知道其實SDXL 1.0也發佈了。 有個小小的差別是,目前想試用SDXL 1.0稍微麻煩一點點,它只能在discord中使用。目前還是免費使用,如果它的經營模式跟midjourney一樣的話,應該不久後就要收費了。
DALL·E 3是OpenAI近期推出的繪圖模型,相對於舊版可以說是進步的非常非常多。 目前在微軟的bing與chatGPT Plus中都可以試用DALL·E 3,這篇文章除了簡介DALL·E 3的進步與特性之外,也比較在bing與chatGPT Plus這兩個平台中使用DALL·E 3有何不同?有
幾乎可以說是跟stable diffusion一體同命的ControlNet的XL版本總算是上線了,算是為SDXL補上最關鍵一塊地圖,以下快速的來瀏覽一下它的安裝方式與功能吧。
stable-diffusion-webui AUTOMATIC1111在近期更新到1.6版了,我在本文中列出較重要的8個有感且實用的更新項目。 而那些較為底層的,或是專給高手使用的更新項目我就不細說了。
tensor.art是一個很新的AI繪圖網站,目前還沒看到有什麼廣告或是業配,目前僅在Stable Diffusion 台灣社群v2社團看到一兩篇廣告跟介紹而已。 目前還沒有具體的營利模式,每天有100個繪圖點可以畫100張圖,但也因為還沒有營利模式,所以就算你想花錢買點數也沒得買。
這篇文章講解在stable diffusion webui上安裝SDXL。 在stable diffusion webui上使用SDXL的步驟不難,比較要注意的是SDXL的幾個重點差異,你要先依這個差異來評估自己是否要升級,以免白忙一場。
其實我消息算是有點後知後覺,才剛寫完SDXL0.9的消息後,才知道其實SDXL 1.0也發佈了。 有個小小的差別是,目前想試用SDXL 1.0稍微麻煩一點點,它只能在discord中使用。目前還是免費使用,如果它的經營模式跟midjourney一樣的話,應該不久後就要收費了。
你可能也想看
Google News 追蹤
Thumbnail
/ 大家現在出門買東西還會帶錢包嗎 鴨鴨發現自己好像快一個禮拜沒帶錢包出門 還是可以天天買滿買好回家(? 因此為了記錄手機消費跟各種紅利優惠 鴨鴨都會特別注意銀行的App好不好用! 像是介面設計就是會很在意的地方 很多銀行通常會為了要滿足不同客群 會推出很多App讓使用者下載 每次
Thumbnail
本文探討了影像生成模型的多種應用,包括文字、圖像和聲音到影片的生成,涵蓋了GAN、Transformer和Diffusion等技術。透過回顧相關研究,分析影像生成技術的未來趨勢與挑戰,為讀者提供全面的理解與啟示。
Thumbnail
文章中,我們介紹了幾款免費的AI影片製作工具,並提供了使用教學和技巧。無論是Lumen5、Pictory、Canva、Kapwing、CapCut還是FlexClip,這些工具都能幫助你高效地實現影片製作目標。此外,我們還介紹了一些其他輔助工具,如AI配音工具和AI繪圖工具,讓您可以更豐富地製作影片
Thumbnail
先前,Luma AI 不僅提供了免費的3D建模服務,近期更推出了一款全新的 AI 影片生成工具— Luma Dream Machine,讓影片創作變得前所未有的簡單和有趣。這款工具能根據文字提示或圖像生成 5 秒鐘的影片,目前仍有每日免費生成 5 支影片的優惠,快來去試試看吧!
Thumbnail
本文介紹如何使用即夢Dreamina視頻生成工具,以及相關的技巧和注意事項。即夢Dreamina是一個能夠通過靠頭尾幀補中間的幀生成完整視頻的AI工具,並提供每日60積分的服務。文章將介紹製作圖片、背景修改、運鏡控制等步驟,並提供無限生成穿梭動畫的方法。
Thumbnail
本文介紹一個能將影片轉3D的AI工具,名為Luma AI。它能將影片或照片轉換成令人驚奇的3D圖像。文章介紹了Luma AI的願景、使用技術、使用方式、優缺點以及應用發想
Thumbnail
與其僅從應用面思考AI,不如瞭解其背後的原理。本文章探討生成式AI的發展及應用,包含使用AI生成文章、影片等的原理和技術。透過AI的世界原理記錄,可以達到應用無窮的效果。
Thumbnail
如果AI能夠生成高質感的影片,對影視業不啻一場革命。 無需龐大設備和龐大後製團隊,只需要指令,幾分鐘即能輕鬆完成。 這對影視業來說無疑是一場革命。
Thumbnail
人工智慧(AI)的發展日新月異,其中生成式AI成為近年矚目的焦點之一。生成式AI不僅能夠模仿人類智能,更能夠創造全新的內容和想法。本文將深入探討生成式AI在影像領域的應用,包括其概念、原理、發展趨勢,以及一些嶄新的生成式AI公司和軟體。
Thumbnail
隨著科技發展,AI技術成就卓越,尤其AI生成器在繪圖、文案和影片創作中蓬勃興起。本文深入介紹領先AI生成器,重點關注MyEdit的免費AI繪圖工具,以及Midjourney、Fotor、Artguru等出色選擇。這些工具讓用戶輕鬆將文字、指令轉換成驚豔的繪畫、影片和文案,為創意提供無盡可能。
Thumbnail
/ 大家現在出門買東西還會帶錢包嗎 鴨鴨發現自己好像快一個禮拜沒帶錢包出門 還是可以天天買滿買好回家(? 因此為了記錄手機消費跟各種紅利優惠 鴨鴨都會特別注意銀行的App好不好用! 像是介面設計就是會很在意的地方 很多銀行通常會為了要滿足不同客群 會推出很多App讓使用者下載 每次
Thumbnail
本文探討了影像生成模型的多種應用,包括文字、圖像和聲音到影片的生成,涵蓋了GAN、Transformer和Diffusion等技術。透過回顧相關研究,分析影像生成技術的未來趨勢與挑戰,為讀者提供全面的理解與啟示。
Thumbnail
文章中,我們介紹了幾款免費的AI影片製作工具,並提供了使用教學和技巧。無論是Lumen5、Pictory、Canva、Kapwing、CapCut還是FlexClip,這些工具都能幫助你高效地實現影片製作目標。此外,我們還介紹了一些其他輔助工具,如AI配音工具和AI繪圖工具,讓您可以更豐富地製作影片
Thumbnail
先前,Luma AI 不僅提供了免費的3D建模服務,近期更推出了一款全新的 AI 影片生成工具— Luma Dream Machine,讓影片創作變得前所未有的簡單和有趣。這款工具能根據文字提示或圖像生成 5 秒鐘的影片,目前仍有每日免費生成 5 支影片的優惠,快來去試試看吧!
Thumbnail
本文介紹如何使用即夢Dreamina視頻生成工具,以及相關的技巧和注意事項。即夢Dreamina是一個能夠通過靠頭尾幀補中間的幀生成完整視頻的AI工具,並提供每日60積分的服務。文章將介紹製作圖片、背景修改、運鏡控制等步驟,並提供無限生成穿梭動畫的方法。
Thumbnail
本文介紹一個能將影片轉3D的AI工具,名為Luma AI。它能將影片或照片轉換成令人驚奇的3D圖像。文章介紹了Luma AI的願景、使用技術、使用方式、優缺點以及應用發想
Thumbnail
與其僅從應用面思考AI,不如瞭解其背後的原理。本文章探討生成式AI的發展及應用,包含使用AI生成文章、影片等的原理和技術。透過AI的世界原理記錄,可以達到應用無窮的效果。
Thumbnail
如果AI能夠生成高質感的影片,對影視業不啻一場革命。 無需龐大設備和龐大後製團隊,只需要指令,幾分鐘即能輕鬆完成。 這對影視業來說無疑是一場革命。
Thumbnail
人工智慧(AI)的發展日新月異,其中生成式AI成為近年矚目的焦點之一。生成式AI不僅能夠模仿人類智能,更能夠創造全新的內容和想法。本文將深入探討生成式AI在影像領域的應用,包括其概念、原理、發展趨勢,以及一些嶄新的生成式AI公司和軟體。
Thumbnail
隨著科技發展,AI技術成就卓越,尤其AI生成器在繪圖、文案和影片創作中蓬勃興起。本文深入介紹領先AI生成器,重點關注MyEdit的免費AI繪圖工具,以及Midjourney、Fotor、Artguru等出色選擇。這些工具讓用戶輕鬆將文字、指令轉換成驚豔的繪畫、影片和文案,為創意提供無盡可能。