Sora 的發布,讓 AI 生成影片工具掀起新的科技創作風暴。然而在 Sora 正式上市之前,還有一款被許多用戶
稱為「Sora超強平替」的亞洲頂尖 AI 生成影片工具 —— 可靈 AI (Kling AI),
它的「文字生成影片」功能最長可生成長達 2 分鐘的影片 (目前免費用戶沒有此時長選項),
而且創作出來的人事物、細節、背景畫面等整體效果,完全遠超車先前一眾類似AI工具,只能說,AI 技術的進展完全是在飛速發展中 ! (近似於令人羨慕的跳級生~)
下方影片展示的,完全都是在 可靈 AI 網站平台上創作出來的,
首先先利用 可靈 AI 的 "文字生成圖片" 功能創作出平面影像,然後再把這些影像轉化為 "影片"。
可靈 AI 可以允許用戶生成 5秒或10秒的影片片段,本文的實作例子是組合了 3 支 5 秒的片段,為了增色,也額外添加了音效上去。(可靈 AI 生成的影片基本上不含音效)
我個人的使用體驗是,他們家 AI 生成出來的人物和影片化效果,對於亞洲或東方面孔非常友好 ,而且人物很自然,影片的活動和效果也比其他免費的同款前輩軟體優化不少。
🔆 需要注意的是,因為我使用的是「免費」方案,所以在生成模式部分只能選擇 「高性能」(速度較快),而無法選擇「高表現」(細緻度更高,需付費方案才能選用)。 (見下圖)
如果能使用「高表現」生成模式,相信畫面效果將會更優質!
以下影片,同樣是先利用 可靈 AI 的 "文字生成圖片" 功能創作出平面影像,然後再把這些影像轉化為 "影片"。
以下影片是透過採用 可靈 AI 官網上的現成影片製作而成,方法非常簡單,
就是選擇喜歡的現成影片後,點選「一鍵同款」功能,再稍加修改提示詞 (指令),
稍後本文會另外說明使用過程。
根據官網,可靈大模型(Kling)是由快手公司大模型團隊所研發打造出的影片生成大模型,具備強大的影片生成能力,
可讓使用者輕鬆高效地完成藝術影片和影像的創作。
根據官方介紹,可靈 AI 採用了一種 3D 時空聯合注意力機制,可強化建模複雜的時空運動,
能夠在符合現實世界運動規律的前提下,生成運動幅度較大的影片內容。(見下方影片,影片來源自可靈AI)
根據官網,可靈 AI 的高效訓練基礎設施、極致的推理優化和可擴展的基礎架構,
能使可靈大模型生成長達 2 分鐘的影片,且幀率達到 30fps。
(見下方影片,影片來源自可靈AI)本文的實作例子是組合了 2 支片段,同樣為了增色,也額外添加了音效。
在每支長達近2分鐘的影片中,可看見沿途上 AI 創建出的景觀、畫面、四季背景更迭,
光影、倒影、人物的活動等等,每個元素的表現都令人讚嘆,
很難想像以後拍電影或電視劇時,這類畫面還需要用上實景和真人嗎?
根據官網,可靈 AI 具備的強大建模能力,使其能夠模擬真實世界的物理特性,
進而生成符合現實世界物理規律的影片。
(見下方影片,影片來源自可靈AI)說真的,影片中的小孩,可能還能猜得出是 AI 生成的人物,但吃麵的大叔真的很寫實😆,
麵條的牽動、漢堡被咬了一口後的狀態,同樣也很到位,能夠產生出這樣的效果,相信已經讓不少人 (至少我自己是) 難以分辨出真與假~
可靈 AI 擁有對從文本到影片語義的深刻理解力和 Diffusion Transformer 架構的強大能力,
能夠將豐富的想像力轉化為具體的畫面,虛構出真實世界中不存在的人事物。
這種能力足以讓使用者創造出類似卡通、動漫和奇幻背景的效果和影像,
未來此類技術勢必將持續進步,距離普通人也能輕鬆製作卡通動漫類型影片的時代已經不遠了~
(見下方影片,影片來源自可靈AI)
可靈 AI 能夠生成 1080p 解析度的電影級影片,無論是浩瀚壯闊的宏大場景,或是細膩入微的特寫鏡頭,
都能夠成功地生動呈現!(見下方影片,影片來源自可靈AI)
可靈 AI 具備了卓越的圖像理解能力,能將靜態圖像轉化為生動的精彩影片。
若再搭配創作者各具特色的文本輸入,便能生成多種、多樣化的運動效果,讓視覺創意得以無限延展。(見下方影片,影片來源自可靈AI)
除了文字生成影片,可靈 AI 在圖片生影片的表現上同樣可圈可點。
本文的➡️ 實作成品1 和 ➡️ 實作成品2 都是先用 AI 生成圖片,然後再把圖片升級成影片。
由於可靈 AI 是由大陸快手科技公司所開發的短影音行動應用程式,而目前許多大陸軟體都需要搭配其他App 帳號同步登入,
例如抖音、微信等等,可靈 AI 則是需要藉由登入一款名為 "快手" 的App,
也就是手機端需要先下載 "快手" App,再用 App 中的掃 QR code 功能掃描可靈 AI 網頁端提供的 QR code。
如果要生成影片或圖片,在條件允許的情況下,我自己還是更偏好使用電腦 (也就是 Web 網頁版),
不過如果你有大陸的 "快手" 帳號,或是擁有大陸手機號、並且成功註冊了快手和可靈 App,當然也可以使用「移動端體驗」(也就是行動裝置版本)。
如下圖,我們可選擇要使用「AI 圖片」還是「AI 視頻」(AI 影片) 功能進行創作。
「模板影片一鍵同款」影片實作成品如下:(提示詞只是把 "貓熊" 改為了 "老虎" )
圖片部分,除了基本的 AI 繪圖指令描述外,還可提供參考圖片 (墊圖,非必要),以及選擇圖片長寬比。(下圖)
影片部分,則需要設定數個參數,不過也不算多,主要是 "影片時長"、"生成模式" (先前提過,免費版僅能選擇「高性能」)、影片長寬比、以及運鏡 (下圖)。
另外,選單最下方還可輸入 "負面提示詞" (不希望呈現的內容效果),例如醜陋、變形、模糊等等。
如上圖,「目前」可靈 AI 可為每日登入的用戶提供約 66 點的免費積點 (官網平台稱為 "靈感值"),
這些積點不會持續累積,每日沒用完的會歸零。隔日登入會再獲得新的 66 點。
AI 生圖每次大約只需0.8~2點以內,非常夠用,而 AI 生視頻則視情況而異,
生成秒數較長會需要消耗更多積點。
另外,如果是付費用戶,倘若生成模式是選擇 "高表現" (畫面更精緻,效果更佳),當然也會需要消耗更多積點。
(溫馨提醒:AI 工具的收費/方案經常變化,請以官方公告為準據。)
可靈 AI 和以 Open AI 為技術來源的 Sora,都是新一代的 AI 創意生產力平台,是一種顛覆性的 AI 工具,
可讓充滿想像力和創意的人們輕鬆創建出令人驚嘆的作品,將想法轉化為現實,實現創意的無限可能。有興趣的朋友們,不如來試試看吧!