Luma AI 顛覆視覺體驗!3D生成如此簡單

閱讀時間約 4 分鐘

今天來分享一個和視覺有關,效果超級 Amazing 的 AI工具── Luma AI

當初在看到這款軟體令我印象最深刻的是,它能直接將影片(或多張照片)轉換成立體的逼真3D圖像

先來瞧瞧實際生成的結果

展示範例

展示範例

是不是十分地 Amazing 呢!😮


1. 簡介 Luma AI

願景

Luma 的使命是讓每個人都能捕捉和體驗逼真的 3D 世界。下一步是改變我們在網路上分享記憶、探索產品和空間的方式。將照片和影片帶入混合實境 3D 未來。

使用技術

Luma AI 的3D生成技術使用的是 NeRF 神經輻射場技術,主要透過物件的大小、距離,以及「光線反射」,例如陰影、亮度、顏色等資訊進行渲染。因此畫面中物件的材質會大大影響3D生成的效果。官方文檔也表明了對特殊反射材質的處理的難處。

目前難以處理複雜的反射(例如彎曲的鏡面表面)、彎曲的透明物件(例如車窗或塑膠水瓶)以及非常大的無紋理表面(例如白色的牆壁)。大多數其他材料都效果良好。

2. 如何使用

平台入口

Luma AI 有推出網站平台以及手機版

  • 網站版:操作十分簡單,登入之後只需上傳想變成 3D 的影像,就可以列隊等待生成結果了。(且完全免費!)
  • 手機版:則更簡單,從「拍攝影片到上傳、生成結果」一氣呵成。👍

甚至還附有貼心的引導網格線,指引你如何拍出優質的影像數據。

手機版有引導格線-圖片擷取自App Store介紹

手機版有引導格線-圖片擷取自App Store介紹

當然,假如要生成一個好的 3D 物件,影片可不能隨便拍拍就好。

官方的建議是用低中高不同角度緩慢地循環捕捉場景

影片拍攝指引說明

  • 拍攝影片時禁用 HDR
  • 透過循環捕捉場景或物體
  • 理想情況下,從 3 個高度進行循環拍攝:手機在胸部高度向前看,手機在頭部上方一點,指向場景的中心,最後從膝蓋高度指向上方。
  • 緩慢拍攝以減少模糊

經筆者幾次實測,若有按照上述提示拍攝影片素材,所生成的 3D 物件/場景都能有不錯了的成果。😊


優缺點

  • 優點

操作簡單易上手(錄好影片上傳即可轉 3D)
免費且可商業使用
容易共享(可以分享連結或嵌入程式碼)

  • 缺點

主體物件以外的場景容易出現模糊殘影。
細節部分仍較粗糙,無法取代精細的 3D 掃描儀。


3. 測試範例

用盆栽當主角測試
(那剛開始渲染的畫面,每次看都覺得很酷XD)

用小盆栽來測試 效果不錯

用小盆栽來測試 效果不錯

點進去連結,可以從不同角度觀看
(可以用鍵盤的WASD前後左右移動+QE上下移動)


令我比較震驚的是,在拍不到的地方(比如窗外),這個工具竟有能力靠演算重建原本的物件!

像是這邊窗戶外那一側我是完全拍不到的,它卻能模擬出從窗外看進來的視角😲(儘管大部分看起來仍然模糊,但能做到這樣已是不可思議)

居然能模擬從窗外看進來的視角

居然能模擬從窗外看進來的視角



4. 應用發想

家俱買賣、車子交易

逼真寫實的效果

逼真寫實的效果


線上賞車

線上賞車


虛擬旅遊、建築設計、藝術品欣賞

在網路遊覽世界著名景點

在網路遊覽世界著名景點


欣賞建築

欣賞建築


欣賞藝術品

欣賞藝術品

可以從多種角度去欣賞

可以從多種角度去欣賞


遊戲3D建模、AR/VR遊戲、空間引導

寬廣的車站空間也能3D化

寬廣的車站空間也能3D化

遊戲3D建模

遊戲3D建模


其他奇妙應用

海底探險、寵物分享

海底比較難建模的地方,現在只要拍段影片也能輕鬆建模

海底比較難建模的地方,現在只要拍段影片也能輕鬆建模


沉浸式吸貓(=´ω`=)

沉浸式吸貓(=´ω`=)


5. 結語

自電腦與 AI 問世後,人類的科技便不斷地躍進。伴隨而來的神奇應用層出不窮。像是Luma AI 這方便人們輕鬆將影片轉成 3D 物件的功能,儘管目前尚未純熟,但卻能讓人們瞥見了未來的無限可能。

姑且不論轉成 3D 圖像之後的數不清的應用。光是能從不同角度去看一張圖像這個功能,就令人感到相當驚奇了。筆者已能想像不久的將來手機裡存的照片不再只是 2D 照片,而是能從各種角度去觀賞的 3D 圖像了。

這不禁讓我聯想到了哆啦A夢裡一個名為「立體相簿」的道具。(其功能就是能讓照片變成立體的)。隨著科技進步,已有越來越多奇妙道具變成現實了呢。


By 阿福

avatar-img
21會員
15內容數
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
iFormosa TechWave 的其他內容
當你下定決心想要創作完美的圖片時,是否總是感到生圖製圖工具太過複雜、難以使用?別擔心!今天我們將介紹一款簡單直覺的 AI 生圖工具,幫助大家輕鬆製作出美美的圖片!   Stylar.ai 是一款極具多功能的 AI 圖片生成工具,旨在讓圖像處理變得更加容易且具有創造性。無論是要匯入圖片還是文
Spline是一款輕量化的3D建模工具,只需在網頁上登入就能輕鬆繪製3D物件並加上互動效果,創作出的成品還可以轉成程式碼應用在網站或app上,也能轉成其他3D格式或影片、圖片...等。而Spline其實在去年時就有推出AI生成3D設計了,最近官方又有發布AI更新訊息,新版的 Spline AI 專注
會不會有時候只是想要簡單的快速影片去背,剛好電腦沒有安裝適合的影片剪接軟體呢?pinokio這網站提共大量的AI小工具,只要安裝他在桌面,立即可獲最新的AI工具,並且他隨時更新最新版本,省下大量爬文搜尋時間,正適合不會程式的使用者一鍵無腦享受AI帶來的便利與快速。 這次介紹裡面一個好用的小工具"R
有沒有曾經覺得背誦詩詞很困難呢? 枯燥乏味,甚至可能連意思都不理解 背完就忘,無法形成長期記憶...... 這篇文章來教大家利用最近正夯的Suno.AI製作好聽好唱又好記的歌曲!
在瀏覽Youtube時,是否常被留言區的惡意評論影響心情?為了避免這些負面內容,Tune提供了一個解決方案。這是一個開源的Chrome擴充功能,可以幫助使用者過濾負面或有害內容,讓網路環境更加清潔。此文章詳細介紹Tune的使用方法、功能,並提供了Perspective API串接實作測試範例。
想製作看起來專業又精美的圖表嗎?面對一堆數據卻不知該如何報告嗎? Graphy絕對能滿足你的需求! Graphy是一個提供圖表製作、數據分析等功能的AI工具,讓使用者能夠快速創建和分享數據視覺化的內容,使報告製作變得更加高效、易於理解,無需複雜的整合或廣泛的學習。
當你下定決心想要創作完美的圖片時,是否總是感到生圖製圖工具太過複雜、難以使用?別擔心!今天我們將介紹一款簡單直覺的 AI 生圖工具,幫助大家輕鬆製作出美美的圖片!   Stylar.ai 是一款極具多功能的 AI 圖片生成工具,旨在讓圖像處理變得更加容易且具有創造性。無論是要匯入圖片還是文
Spline是一款輕量化的3D建模工具,只需在網頁上登入就能輕鬆繪製3D物件並加上互動效果,創作出的成品還可以轉成程式碼應用在網站或app上,也能轉成其他3D格式或影片、圖片...等。而Spline其實在去年時就有推出AI生成3D設計了,最近官方又有發布AI更新訊息,新版的 Spline AI 專注
會不會有時候只是想要簡單的快速影片去背,剛好電腦沒有安裝適合的影片剪接軟體呢?pinokio這網站提共大量的AI小工具,只要安裝他在桌面,立即可獲最新的AI工具,並且他隨時更新最新版本,省下大量爬文搜尋時間,正適合不會程式的使用者一鍵無腦享受AI帶來的便利與快速。 這次介紹裡面一個好用的小工具"R
有沒有曾經覺得背誦詩詞很困難呢? 枯燥乏味,甚至可能連意思都不理解 背完就忘,無法形成長期記憶...... 這篇文章來教大家利用最近正夯的Suno.AI製作好聽好唱又好記的歌曲!
在瀏覽Youtube時,是否常被留言區的惡意評論影響心情?為了避免這些負面內容,Tune提供了一個解決方案。這是一個開源的Chrome擴充功能,可以幫助使用者過濾負面或有害內容,讓網路環境更加清潔。此文章詳細介紹Tune的使用方法、功能,並提供了Perspective API串接實作測試範例。
想製作看起來專業又精美的圖表嗎?面對一堆數據卻不知該如何報告嗎? Graphy絕對能滿足你的需求! Graphy是一個提供圖表製作、數據分析等功能的AI工具,讓使用者能夠快速創建和分享數據視覺化的內容,使報告製作變得更加高效、易於理解,無需複雜的整合或廣泛的學習。
你可能也想看
Google News 追蹤
Thumbnail
徵的就是你 🫵 超ㄅㄧㄤˋ 獎品搭配超瞎趴的四大主題,等你踹共啦!還有機會獲得經典的「偉士牌樂高」喔!馬上來參加本次的活動吧!
Thumbnail
隨著理財資訊的普及,越來越多台灣人不再將資產侷限於台股,而是將視野拓展到國際市場。特別是美國市場,其豐富的理財選擇,讓不少人開始思考將資金配置於海外市場的可能性。 然而,要參與美國市場並不只是盲目跟隨標的這麼簡單,而是需要策略和方式,尤其對新手而言,除了選股以外還會遇到語言、開戶流程、Ap
Thumbnail
除了 Luma DreamMachine 以外,如果想用文字或照片自動生成影片的話,還有其他選擇嗎?可以試試 Vidu AI 生成式影片服務,一起了解如何使用 Vidu 及進階技巧,輕鬆製作二次元或東方臉孔的 AI 影片!Vocus 網友專屬避免踩坑資訊在最後一段。
Thumbnail
文章中,我們介紹了幾款免費的AI影片製作工具,並提供了使用教學和技巧。無論是Lumen5、Pictory、Canva、Kapwing、CapCut還是FlexClip,這些工具都能幫助你高效地實現影片製作目標。此外,我們還介紹了一些其他輔助工具,如AI配音工具和AI繪圖工具,讓您可以更豐富地製作影片
Thumbnail
先前,Luma AI 不僅提供了免費的3D建模服務,近期更推出了一款全新的 AI 影片生成工具— Luma Dream Machine,讓影片創作變得前所未有的簡單和有趣。這款工具能根據文字提示或圖像生成 5 秒鐘的影片,目前仍有每日免費生成 5 支影片的優惠,快來去試試看吧!
Thumbnail
使用LUMA AI,靜圖AI轉動畫,很有趣,成品也……還算喜歡? 所以寫篇網誌紀念一下~~😊💕
Thumbnail
Dream Machine 是由Luma AI 研發開發的 AI 影片生成工具,可以根據文字提示或圖像生成5秒鐘的高質量、逼真的影片。
Thumbnail
當今數位時代,AI 的應用正在不斷擴展,其中一個最令人振奮的領域就是 AI 插圖生成。Ilus AI 作為一款 AI 插圖生成器,以其快速、方便和豐富的功能,吸引了眾多用戶。因此今天,我們將分享 Ilus AI,帶你了解如何使用它,並讓 AI 幫你打造你想要的插圖,讓你的創作增添無限可能性。
Thumbnail
從文字輸入建立 3D 頭像動畫代表了重大飛躍。想像一下,只需輸入幾句話,就可以看到一個詳細、栩栩如生的頭像在螢幕上栩栩如生,並以逼真的動畫移動。這項技術並不是科幻小說中的幻想;而是一種技術。這是由尖端人工智慧 (AI) 驅動的令人興奮的現實。文字描述向動畫角色的轉變正在重塑數位創造力,並為個
Thumbnail
如果AI能夠生成高質感的影片,對影視業不啻一場革命。 無需龐大設備和龐大後製團隊,只需要指令,幾分鐘即能輕鬆完成。 這對影視業來說無疑是一場革命。
Thumbnail
幾天前OpenAI公司發表了全新的「AI生成影片」技術:透過一段簡短的「文字」敘述,讓AI生成一分鐘、1080P畫質的精美逼真影片。 礙於能力時間有限,我只能從使用ChatGPT、Bing這一年來獲得的大量經驗,閱讀研究大量AI相關資料整理的結論,分享AI生成圖片影片對「親密關係」可能帶來的衝擊。
Thumbnail
Transformer被廣泛運用在各種生成式AI,激起了本篇作者的好奇心,是否能用Transformer學到所有先驗知識,足以讓它由一張2D圖片還原3D物件。本篇也從Github上面找到由ZexinHe開源的LRM實作程式,讓有興趣的人可以深入研究。
Thumbnail
徵的就是你 🫵 超ㄅㄧㄤˋ 獎品搭配超瞎趴的四大主題,等你踹共啦!還有機會獲得經典的「偉士牌樂高」喔!馬上來參加本次的活動吧!
Thumbnail
隨著理財資訊的普及,越來越多台灣人不再將資產侷限於台股,而是將視野拓展到國際市場。特別是美國市場,其豐富的理財選擇,讓不少人開始思考將資金配置於海外市場的可能性。 然而,要參與美國市場並不只是盲目跟隨標的這麼簡單,而是需要策略和方式,尤其對新手而言,除了選股以外還會遇到語言、開戶流程、Ap
Thumbnail
除了 Luma DreamMachine 以外,如果想用文字或照片自動生成影片的話,還有其他選擇嗎?可以試試 Vidu AI 生成式影片服務,一起了解如何使用 Vidu 及進階技巧,輕鬆製作二次元或東方臉孔的 AI 影片!Vocus 網友專屬避免踩坑資訊在最後一段。
Thumbnail
文章中,我們介紹了幾款免費的AI影片製作工具,並提供了使用教學和技巧。無論是Lumen5、Pictory、Canva、Kapwing、CapCut還是FlexClip,這些工具都能幫助你高效地實現影片製作目標。此外,我們還介紹了一些其他輔助工具,如AI配音工具和AI繪圖工具,讓您可以更豐富地製作影片
Thumbnail
先前,Luma AI 不僅提供了免費的3D建模服務,近期更推出了一款全新的 AI 影片生成工具— Luma Dream Machine,讓影片創作變得前所未有的簡單和有趣。這款工具能根據文字提示或圖像生成 5 秒鐘的影片,目前仍有每日免費生成 5 支影片的優惠,快來去試試看吧!
Thumbnail
使用LUMA AI,靜圖AI轉動畫,很有趣,成品也……還算喜歡? 所以寫篇網誌紀念一下~~😊💕
Thumbnail
Dream Machine 是由Luma AI 研發開發的 AI 影片生成工具,可以根據文字提示或圖像生成5秒鐘的高質量、逼真的影片。
Thumbnail
當今數位時代,AI 的應用正在不斷擴展,其中一個最令人振奮的領域就是 AI 插圖生成。Ilus AI 作為一款 AI 插圖生成器,以其快速、方便和豐富的功能,吸引了眾多用戶。因此今天,我們將分享 Ilus AI,帶你了解如何使用它,並讓 AI 幫你打造你想要的插圖,讓你的創作增添無限可能性。
Thumbnail
從文字輸入建立 3D 頭像動畫代表了重大飛躍。想像一下,只需輸入幾句話,就可以看到一個詳細、栩栩如生的頭像在螢幕上栩栩如生,並以逼真的動畫移動。這項技術並不是科幻小說中的幻想;而是一種技術。這是由尖端人工智慧 (AI) 驅動的令人興奮的現實。文字描述向動畫角色的轉變正在重塑數位創造力,並為個
Thumbnail
如果AI能夠生成高質感的影片,對影視業不啻一場革命。 無需龐大設備和龐大後製團隊,只需要指令,幾分鐘即能輕鬆完成。 這對影視業來說無疑是一場革命。
Thumbnail
幾天前OpenAI公司發表了全新的「AI生成影片」技術:透過一段簡短的「文字」敘述,讓AI生成一分鐘、1080P畫質的精美逼真影片。 礙於能力時間有限,我只能從使用ChatGPT、Bing這一年來獲得的大量經驗,閱讀研究大量AI相關資料整理的結論,分享AI生成圖片影片對「親密關係」可能帶來的衝擊。
Thumbnail
Transformer被廣泛運用在各種生成式AI,激起了本篇作者的好奇心,是否能用Transformer學到所有先驗知識,足以讓它由一張2D圖片還原3D物件。本篇也從Github上面找到由ZexinHe開源的LRM實作程式,讓有興趣的人可以深入研究。