瞬間生圖的SDXL-Turbo有什麼重要性?

閱讀時間約 4 分鐘
raw-image


最近 Stability.Ai 這間公司又發表了一個新的Model 叫做 SDXL Turbo。眾所周知SDXL 對比過去的 SD 1.5 的特性是,Model比較大,不但可以產生構圖較好的AI畫作,也能夠產生較高解析度的圖片。 但是這款SDXL Turbo 主打的確是完全不同的方向,SDXL Turbo主打可以1 step就產生一定品質的圖片 (圖片品質比SDXL甚至SD 1.5還要低),完全是以速度取勝,那麼SDXL Turbo這個技術代表的是怎樣的突破呢? 究竟秒出圖的技術能夠有什麼實際的應用呢? 這就是我們這篇想要探討的。

首先我們還是來看看SDXL Turbo實際上操作的樣子,我們這篇不是教學怎麼使用SDXL Turbo所以不會討論到安裝的部分,實際上使用需要去下載SDXL Turbo的Model,並且推薦使用Comfyui 較為彈性。 能夠做到的狀態,大概就是如下圖

SDXL Turbo Prompt

SDXL Turbo Prompt

雖然Gif檔的解析度不夠高,但是大家是可以看到,隨著我自己一邊改變提示詞(prompt),圖片裡的畫面就會即時更新,為什麼可以做到這樣呢? 因為SDXL Turbo的產圖速度太快了,如果顯卡夠力甚至可以0.1秒就產一張圖,就可以做到一邊改提示詞一邊馬上看到圖片更新。

再來SDXL Turbo本身也能加上導引的Painting node,那麼就能做到底下的效果

SDXL Turbo Painter Node

SDXL Turbo Painter Node

也就是除了提示詞以外,我一邊畫用作導引的圖,右邊的AI生圖也能即時更新。導引圖可以針對顏色,構圖等等的做出導引,可以說是非常有意思的應用。

那麼,究竟AI秒出圖的意義在那邊呢? 這才是我想要探討的議題,粗淺的稍為思考了一下,我想針對幾個情境來思考。

第一個情境是,原本就對於需要產生畫作的工作,這有可能是2D/3D設計師,插畫師,美工排版人員,小編等等。SDXL Turbo 這種秒產圖的能力可以說是有非常直接的貢獻,畢竟你可以在固定其他參數的狀態下,快速的微調你的提示詞,甚至是與ChatGPT一起協做發想提示詞,用超快的速度產出各式各樣不同的圖案,再從滿意的風格/提示詞中選擇大的Model 如SDXL 去產生好的高解析度圖案。 而 SDXL with painter node 也提供了可以有效的控制產出的方式,可以說是讓設計師從簡單的構圖還有色彩馬上就能看到成果,可以讓設計師更為集中精力在如何傳達產品/圖片的精神上。

第二個情境我們就要跳脫"設計師"還有"美工"這個領域了,我們來思考確實需要圖片創作但是卻不是直接與設計相關的部分,能否應用到這個新技術呢? 最直觀馬上可以想到的就是類似Powerpoint 投影片創作的部分,相信很多上班族都看夠了平淡無奇僅僅有文字的投影片吧? 如果說搭配上這樣秒產圖的技術,讓你一邊創作投影片的時候,AI立刻自動替你補上圖片說明,讓你的投影片一看就能理解,那麼是不是有很大的幫助呢?

raw-image

這應該是馬上就能夠實現的,不過我認為這個功能,應該是會由Microsoft Office 的Office copilot 直接實現,而其他所有的設計或是簡報類的軟體,應該都會馬上導入這個技術的。

最後一個我們要探討的,就是跳脫傳統設計領域,且傳統上也不需要圖片的應用領域,那麼這包含什麼領域呢? 其實我覺得這應該才是最有意思且潛力最大的,舉例來說 Meta(Facebook)就有在他們發表的演說裡面提到,將來會將這種繪圖的應用用到類似messenger的即時通訊之中,那麼只要交談的人有意願,AI隨時可以把你們談論到的事物具象化,或是把你的表情即時的產出一個emoji。

另外這樣的技術也能夠應用到譬如電子小說/電子遊戲之中,讓原本只有文字介面的小說/文字型電玩直接變成是圖文並茂(或是理所當然的搭配AI產生的音樂的產品),而在娛樂的範疇或社交網路的範疇,更有無限多的應用,並且讓 content creator 的想像力能夠解放。 ​

最後的想法就是,這樣超快速產圖的科技,會讓Generative AI快速的下放到手機/平板等隨身的設備上面,而這樣可以激盪出怎樣的火花呢? 這就是我們可以持續思考(也應該是潛力無窮的地方了)






技術PM的AI實驗室,是以輕鬆的角度深入簡出的探討各種生成式AI工具的使用。無論你是想理解AI到底是怎麼運作的? 想知道有那些好用的生成式AI工具? 或者是對AI繪圖有興趣的,都歡迎加入我們的AI實驗室一起輕鬆地玩耍,我們邊玩邊學,學習跟AI一起共創新的可能。
留言0
查看全部
發表第一個留言支持創作者!
這篇文章會跟大家介紹,為什麼我覺得ChatGPT的多模態輸入輸出其實是最重要的一個功能之一,讓AI往成為真正人工智慧代理人的路上前進了一大步,我們也會稍微探討(想像)一下,所謂的理想的AI載具到底應該是怎樣的?
本篇文章是 以ChatGPT翻譯華頓商學院教授Ethan Mollick的文章,並且稍微加上修飾而來的,是一篇相當好的該如何使用AI的引言,分享給各位。 我們學到的就是,只要使用AI,你就會學會如何使用AI。你只需大量使用AI,直到你弄清楚它的優點和缺點,就可以成為你領域的AI應用專家。
本篇文章是翻譯自 AI大神 吳恩達 Andrew Ng 的電子信件,吳恩達是史丹福大學計算機科學系和電氣工程系的客座教授,曾任斯坦福人工智慧實驗室主任。他與達芙妮·科勒一起創建了在線教育平台Coursera。本篇文章吳恩達談到AI與邊緣運算。
本篇文章是筆者近期聽過的一篇非常好的Podcast,為了想要記錄下來於是找了Podcast Note並且配合ChatGPT進行翻譯,想要聽Podcast或是參考原文的請看這邊。 本篇文章從神經心理學上面探討如何增強你的意志力跟監韌性,我覺得非常值得參考,分享給大家。 如何增強你的意志力和堅韌
ChatGPT背後的技術 大型語言模型 是否與我們前面介紹的神經網路相同呢? 答案是不同的,這也是我們想要進一步探討了解的課題。今天會先解釋什麼是語言模型,想要做到的是哪些事情。
今天要介紹的是一款免費好用的AI圖片放大器。 這款AI圖片放大器不但是完全免費的,而且好心人士還編譯了Windows/Linux/MacOS等各種版本,讓大家可以直接一鍵下載安裝,可是說是非常的佛心。
這篇文章會跟大家介紹,為什麼我覺得ChatGPT的多模態輸入輸出其實是最重要的一個功能之一,讓AI往成為真正人工智慧代理人的路上前進了一大步,我們也會稍微探討(想像)一下,所謂的理想的AI載具到底應該是怎樣的?
本篇文章是 以ChatGPT翻譯華頓商學院教授Ethan Mollick的文章,並且稍微加上修飾而來的,是一篇相當好的該如何使用AI的引言,分享給各位。 我們學到的就是,只要使用AI,你就會學會如何使用AI。你只需大量使用AI,直到你弄清楚它的優點和缺點,就可以成為你領域的AI應用專家。
本篇文章是翻譯自 AI大神 吳恩達 Andrew Ng 的電子信件,吳恩達是史丹福大學計算機科學系和電氣工程系的客座教授,曾任斯坦福人工智慧實驗室主任。他與達芙妮·科勒一起創建了在線教育平台Coursera。本篇文章吳恩達談到AI與邊緣運算。
本篇文章是筆者近期聽過的一篇非常好的Podcast,為了想要記錄下來於是找了Podcast Note並且配合ChatGPT進行翻譯,想要聽Podcast或是參考原文的請看這邊。 本篇文章從神經心理學上面探討如何增強你的意志力跟監韌性,我覺得非常值得參考,分享給大家。 如何增強你的意志力和堅韌
ChatGPT背後的技術 大型語言模型 是否與我們前面介紹的神經網路相同呢? 答案是不同的,這也是我們想要進一步探討了解的課題。今天會先解釋什麼是語言模型,想要做到的是哪些事情。
今天要介紹的是一款免費好用的AI圖片放大器。 這款AI圖片放大器不但是完全免費的,而且好心人士還編譯了Windows/Linux/MacOS等各種版本,讓大家可以直接一鍵下載安裝,可是說是非常的佛心。
本篇參與的主題策展
時間是2123年,那是一個下著雨的夜晚,冷風一波接著一波颳起,碩大的雨滴一滴滴地落在金屬上。多拉格睜開了雙眼,眼前是一扇窗戶,窗外一片黑暗,他發現自己在一個狹窄的空間裡,那是一個冷凍艙……
不再證明了/不再為了那些不証自明的事情/焚燒,或凋萎/房間逼仄但內心昶亮/虔恭迎接每個早上/晨光穿窗而來
前言 宇希333年 現在是第14號地球世界的火曆2309年。 病毒「無」專門吞噬「感情」、「感覺」、「愛」、「希望」,大部份被感染的人都無法呈現臉部表情,人類也越來越冷漠。 幸虧第14號地球的科技相當發達,腦細胞可以連線面具讓人可以戴著精緻的面具過活,戴面具的人只要用想的就可以呈現臉部的表情。
時間是2123年,那是一個下著雨的夜晚,冷風一波接著一波颳起,碩大的雨滴一滴滴地落在金屬上。多拉格睜開了雙眼,眼前是一扇窗戶,窗外一片黑暗,他發現自己在一個狹窄的空間裡,那是一個冷凍艙……
不再證明了/不再為了那些不証自明的事情/焚燒,或凋萎/房間逼仄但內心昶亮/虔恭迎接每個早上/晨光穿窗而來
前言 宇希333年 現在是第14號地球世界的火曆2309年。 病毒「無」專門吞噬「感情」、「感覺」、「愛」、「希望」,大部份被感染的人都無法呈現臉部表情,人類也越來越冷漠。 幸虧第14號地球的科技相當發達,腦細胞可以連線面具讓人可以戴著精緻的面具過活,戴面具的人只要用想的就可以呈現臉部的表情。
你可能也想看
Google News 追蹤
Thumbnail
接下來第二部分我們持續討論美國總統大選如何佈局, 以及選前一週到年底的操作策略建議 分析兩位候選人政策利多/ 利空的板塊和股票
Thumbnail
🤔為什麼團長的能力是死亡筆記本? 🤔為什麼像是死亡筆記本呢? 🤨作者巧思-讓妮翁死亡合理的幾個伏筆
Thumbnail
瞬間演作必修課程──和弦之和聲進行   和聲進行只有一個原則:不協和-解決 音程頻率動由弱至強為: (協和)P1-P5-P4-M3-m6-m3-M6─m7-M2-M7-m2-#4(不協和) 和弦頻率震動由弱至強為: (協和)m7-M7-m7b5-7-dim7-mM7-M7#5(不協和)
Thumbnail
驚悚一瞬間!大直一處民宅因周邊建案施工釀禍,導致公寓下陷,一樓直接消失。影片來源:記者爆料網 (14:00更新) 台北市建管處表示,目前已勒令基泰建設及福益營造在台北市的工地全部停工,包含大直街案在內,一共7處。  臺北市長蔣萬安昨晚(9/7)前往大直街94巷1弄,視察房屋傾斜案,蔣萬安表示,
Thumbnail
今天的幣圈新聞關注在中國加密貨幣!中國加密貨幣牛市訊號「稍縱即逝」,不到兩天即遭到下架;幣安暫停部份跨鏈服務,Multichain 謠傳團隊遭中國逮捕;灰度母公司 DCG 關閉旗下機構交易部門 TradeBlock。想看更多加密貨幣新聞嗎?鏈習生幣圈日報為你每天整理最新消息!
Thumbnail
心臟衰竭患者一般都是以「喘」來表現,他會覺得坐起來呼吸比較舒服,下肢水腫也是相當典型的表現。但是,還有一些症狀較不會讓人直接聯想心臟問題,而容易延誤病情。
Thumbnail
美國大超市好事多的超人氣商品「美式烤雞」每次逛到這區總令人食指大動很想帶一隻回家...但是
Thumbnail
臺灣從5月15日雙北市實施三級警戒以來 已經過了快要兩個月的時間了 這段時間當中,除了餐飲業者能夠改線上或者是外送的方式來支撐他們的業績之外 其實包括 ktv 以及電競網咖業者在內的十大業者只能夠被迫休息沒有辦法對外營業, 那他們要如何支撐他們的業績呢?
Thumbnail
「那句話『你要好好愛自己,因為有人愛著你』,不知道為什麼,在成為楊曉淇之後才開始對我產生意義。愛自己要從好好生活,好好吃飯,好好睡覺開始,我因此得到許多反思,生活上也開始有所調整。實際而言,我的動作的確因此變得比較快,卻遲遲等不到楊曉淇退駕的一天到來,她始終停留在我的生命當中。」
Thumbnail
這堂課Mr.S 會跟大家繼續分享一些常用名詞介紹,這次是總體經濟與財報相關的名詞介紹, 幫助大家在看財經新聞及閱讀財報時, 可以對這些專有名詞更加熟悉, 除了解釋名詞外, Mr. S也會加一些我個人的看法在裡面。
Thumbnail
這堂課Mr.S 會跟大家分享一些常用名詞介紹, 這樣一來可以幫助大家在閱讀訊息時, 可以對這些專有名詞更加熟悉, 讓我們在解讀文章的時候, 也能更容易理解文章或新聞在表達些什麼, Mr. S預計會約50個常見的名詞解釋, 但會分成幾篇來介紹, 這堂課Mr. S主要集中在介紹股票相關類的名詞
Thumbnail
接下來第二部分我們持續討論美國總統大選如何佈局, 以及選前一週到年底的操作策略建議 分析兩位候選人政策利多/ 利空的板塊和股票
Thumbnail
🤔為什麼團長的能力是死亡筆記本? 🤔為什麼像是死亡筆記本呢? 🤨作者巧思-讓妮翁死亡合理的幾個伏筆
Thumbnail
瞬間演作必修課程──和弦之和聲進行   和聲進行只有一個原則:不協和-解決 音程頻率動由弱至強為: (協和)P1-P5-P4-M3-m6-m3-M6─m7-M2-M7-m2-#4(不協和) 和弦頻率震動由弱至強為: (協和)m7-M7-m7b5-7-dim7-mM7-M7#5(不協和)
Thumbnail
驚悚一瞬間!大直一處民宅因周邊建案施工釀禍,導致公寓下陷,一樓直接消失。影片來源:記者爆料網 (14:00更新) 台北市建管處表示,目前已勒令基泰建設及福益營造在台北市的工地全部停工,包含大直街案在內,一共7處。  臺北市長蔣萬安昨晚(9/7)前往大直街94巷1弄,視察房屋傾斜案,蔣萬安表示,
Thumbnail
今天的幣圈新聞關注在中國加密貨幣!中國加密貨幣牛市訊號「稍縱即逝」,不到兩天即遭到下架;幣安暫停部份跨鏈服務,Multichain 謠傳團隊遭中國逮捕;灰度母公司 DCG 關閉旗下機構交易部門 TradeBlock。想看更多加密貨幣新聞嗎?鏈習生幣圈日報為你每天整理最新消息!
Thumbnail
心臟衰竭患者一般都是以「喘」來表現,他會覺得坐起來呼吸比較舒服,下肢水腫也是相當典型的表現。但是,還有一些症狀較不會讓人直接聯想心臟問題,而容易延誤病情。
Thumbnail
美國大超市好事多的超人氣商品「美式烤雞」每次逛到這區總令人食指大動很想帶一隻回家...但是
Thumbnail
臺灣從5月15日雙北市實施三級警戒以來 已經過了快要兩個月的時間了 這段時間當中,除了餐飲業者能夠改線上或者是外送的方式來支撐他們的業績之外 其實包括 ktv 以及電競網咖業者在內的十大業者只能夠被迫休息沒有辦法對外營業, 那他們要如何支撐他們的業績呢?
Thumbnail
「那句話『你要好好愛自己,因為有人愛著你』,不知道為什麼,在成為楊曉淇之後才開始對我產生意義。愛自己要從好好生活,好好吃飯,好好睡覺開始,我因此得到許多反思,生活上也開始有所調整。實際而言,我的動作的確因此變得比較快,卻遲遲等不到楊曉淇退駕的一天到來,她始終停留在我的生命當中。」
Thumbnail
這堂課Mr.S 會跟大家繼續分享一些常用名詞介紹,這次是總體經濟與財報相關的名詞介紹, 幫助大家在看財經新聞及閱讀財報時, 可以對這些專有名詞更加熟悉, 除了解釋名詞外, Mr. S也會加一些我個人的看法在裡面。
Thumbnail
這堂課Mr.S 會跟大家分享一些常用名詞介紹, 這樣一來可以幫助大家在閱讀訊息時, 可以對這些專有名詞更加熟悉, 讓我們在解讀文章的時候, 也能更容易理解文章或新聞在表達些什麼, Mr. S預計會約50個常見的名詞解釋, 但會分成幾篇來介紹, 這堂課Mr. S主要集中在介紹股票相關類的名詞