付費限定

即時生圖應用大行其道,LCM手法理解與未來應用

閱讀時間約 8 分鐘

北京清華大學改進了傳統Stable Diffusion (SD) 文生圖的加速算法,讓SD這項技術,可以在筆電達到即時(Real Time)運算等級,讓我們一起來了解這項技術,期許未來能在各種應用上使用,或是看到源碼也不陌生。

改良思路與影響:

總體來說,Luo et al. 的研究,基於Latent做一致性模型的迭代調整,大幅降低運算複雜度,衍伸出一系列的改良,大幅降低訓練時間,提高生成影像的品質,然後在inference的時候能達到Real-time的輸出水平。以下列出四點論文的重要貢獻:


基於Latent 做Consistency Model 的計算,而非Image本身,大大降低計算複雜度

基於Latent 做Consistency Model 的計算,而非Image本身,大大降低計算複雜度


使用"Latent" Consistency Model (LCM)

  • 應用在更高的解析度圖片生成: 768 x 768 pixel2 or higher
  • 大幅降低所需的運算複雜度: O(N2)->O(N),對Latent向量(而非輸入圖片)做CM蒸餾
以行動支持創作者!付費即可解鎖
本篇內容共 3314 字、0 則留言,僅發佈於人工智慧宇宙你目前無法檢視以下內容,可能因為尚未登入,或沒有該房間的查看權限。
96會員
128內容數
帶你用上帝視角,針對市面上具有高度價值的影片/論文/書籍,用東方取象,與西方邏輯辯證的角度同時出發,跟著我一起來探討宇宙萬事萬物的本質,隨時隨地都可以來一場說走就走的思維旅行。作者在台積電 / 聯發科等科技產業有累計10年的資歷,近期對於人工智慧,東方易經,西方辯證邏輯,還有佛法向內求有深度興趣。
留言0
查看全部
發表第一個留言支持創作者!
本文帶你三分鐘內跑通"文字生圖片"的網頁APP,使用最頂尖生成技術,LCM-Lora-SDXL模型,能夠在短時間內生成符合文字描述的高解析圖片。屬於免費開源模型(License Link),請不要產生有害內容,進行合理的使用。
隨著人工智慧高速發展,許多重複單調的工作,以肉眼可及的速度,不斷的能夠被機器人取代,許多人因此活在焦慮之中,甚至認為自己該躺平。本文就是針對這個問題來的,論說人之所以為人的波瀾壯闊與慷慨激昂,冥冥之中能夠指引一條道路。
本文帶你在3分鐘內跑通基本範例,用llamaIndex 串接Excel,經過爬蟲與Mistral 7B整理的資料,讓GPT4成為國際政治經濟大師,每天為您自動產生經濟分析報告。
相信替影片配字幕是許多人心中的痛,本文帶你在三分鐘內能夠用你的電腦,寫出一個使用AI將聲音轉成字幕srt檔案的互動操作網頁,可以連接麥克風測試,也可以上傳聲音檔案或是MP3來測試。目前的多國語言版本,能自動辨別語言,不用特別指定,經實測,中英文混雜也能夠正確輸出。
相信大家要能完全理解ROPE編碼與YaRN插值手法,需要較長的時間,導致收穫感沒有這麼強。算法背後其實隱含了宇宙自然運行的道理,旋轉位置編碼,最早的形式出現在古代中國易經,繞完一整圈表示一個階段的結束,預示下一個階段的開始。
本篇精選熱點論文,基於ROPE(Rotary Position Embeddings)改善插值方式,讓模型可以在短序列(4K Tokens)進行訓練,接著在長序列(128K Tokens)僅做少數微調,甚至無須微調,就能達到泛化到極長輸入序列的能力,模型可以吞下一整本雜誌,輸出困惑度表現也能夠維持!
本文帶你三分鐘內跑通"文字生圖片"的網頁APP,使用最頂尖生成技術,LCM-Lora-SDXL模型,能夠在短時間內生成符合文字描述的高解析圖片。屬於免費開源模型(License Link),請不要產生有害內容,進行合理的使用。
隨著人工智慧高速發展,許多重複單調的工作,以肉眼可及的速度,不斷的能夠被機器人取代,許多人因此活在焦慮之中,甚至認為自己該躺平。本文就是針對這個問題來的,論說人之所以為人的波瀾壯闊與慷慨激昂,冥冥之中能夠指引一條道路。
本文帶你在3分鐘內跑通基本範例,用llamaIndex 串接Excel,經過爬蟲與Mistral 7B整理的資料,讓GPT4成為國際政治經濟大師,每天為您自動產生經濟分析報告。
相信替影片配字幕是許多人心中的痛,本文帶你在三分鐘內能夠用你的電腦,寫出一個使用AI將聲音轉成字幕srt檔案的互動操作網頁,可以連接麥克風測試,也可以上傳聲音檔案或是MP3來測試。目前的多國語言版本,能自動辨別語言,不用特別指定,經實測,中英文混雜也能夠正確輸出。
相信大家要能完全理解ROPE編碼與YaRN插值手法,需要較長的時間,導致收穫感沒有這麼強。算法背後其實隱含了宇宙自然運行的道理,旋轉位置編碼,最早的形式出現在古代中國易經,繞完一整圈表示一個階段的結束,預示下一個階段的開始。
本篇精選熱點論文,基於ROPE(Rotary Position Embeddings)改善插值方式,讓模型可以在短序列(4K Tokens)進行訓練,接著在長序列(128K Tokens)僅做少數微調,甚至無須微調,就能達到泛化到極長輸入序列的能力,模型可以吞下一整本雜誌,輸出困惑度表現也能夠維持!
你可能也想看
Google News 追蹤
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
美國總統大選只剩下三天, 我們觀察一整週民調與金融市場的變化(包含賭局), 到本週五下午3:00前為止, 誰是美國總統幾乎大概可以猜到60-70%的機率, 本篇文章就是以大選結局為主軸來討論近期甚至到未來四年美股可能的改變
Thumbnail
Faker昨天真的太扯了,中國主播王多多點評的話更是精妙,分享給各位 王多多的點評 「Faker是我們的處境,他是LPL永遠繞不開的一個人和話題,所以我們特別渴望在決賽跟他相遇,去直面我們的處境。 我們曾經稱他為最高的山,最長的河,以為山海就是盡頭,可是Faker用他28歲的年齡...
Thumbnail
柔軟具伸縮性的運動服裝,緩緩沿著身型塑出身體曲線,香奈爾按此概念設計服裝。
Thumbnail
今天的幣圈新聞關注在全球最大加密貨幣交易所幣安,知名雜誌曝幣安高管因監管原因集體離職,目前已受幣安官方證實。另外一則幣圈新聞則是:Blur V2 更新釋出,Gas 減少 50%!香港監管的下一步:證券型代幣、RWA。
Thumbnail
呃,本蛙身為虔誠佛教徒,當然要追隨師父參悟佛法,達到明心見性境界~ 賭輸不可恥,不敢賭才可恥,啥,就好比賭投機生技股輸了,就改賭鎖碼權證,萬一再輸了,就賭投機興櫃股,反正坐莊的不會輸,賠的都是別人…… 呃,你說這個舍利子有啥關係,嗯,關係是這樣的,「宗教大師」信徒雖多,卻燒不出舍利子。
Thumbnail
未開始之前,啊壽想定義一下今次數據文章主旨,有別於大家睇開的估值報告是次文章最重要是將在網上可摘取的數據作出圖像化,讓大家可以在閱讀財務報告相對輕鬆,容易理解當中內容。報告內容會以Tableau 及 Power BI 演示 ,而數據摘取截止到2022年10月尾..... 詳細內文可到: https:
Thumbnail
今年巴西自由土地營的主題是「奪回巴西:劃定領土及政治本土化」。來自巴西各地一百二十個原住民族共計五千多名領導人,譴責現任總統波索納洛的不當政策,也譴責聯邦國會「用筆墨來屠殺我們」(亦即透過傷害性立法)。
Thumbnail
別這麼快放棄,在這個觸及率超低的年代,還是有許多臉書專頁能在完全不投放廣告的情況下,經營的有聲有色,貼個文一呼百應,先不論轉換率或實際商業上有什麼幫助,至少貼文有人互動,品牌就自動給人一股接地氣的親民感。
Thumbnail
身為社群小編,對於《粉絲團洞察報告》數據應該都不陌生,谷哥大神們也都手把手教大家如何運用後台資料,強調「在對的時間貼文,才能提升能見度」,尤其現在臉書演算法一直在變,因此了解粉絲上線時間也就格外重要。 如果你的粉絲團以台灣為主,那你看到的後台圖表應該是長成以下這樣: 很奇怪吧?中午時間左看右看,明明
Thumbnail
七年級的學生拿到批改完的古典文學測驗卷時,一邊忐忑地說,「金魚老師一定超生氣的。」一邊湊上來我身旁說,「妳是不是很生氣啊?」 學生想像中的老師 我有點疑惑的望著她,一邊笑嘻嘻地說,「我為什麼要生氣?」 「因為我們某某老師就很生氣啊!」他們出現難得的緊張。 「可是是妳們考不好,又不是我考不好。」我還是
Thumbnail
佛法弘揚,刻不容緩! 尊貴龍德嚴淨仁波切,利益眾生的心極為強大,發願建造一處人間淨土,讓所有想走在佛法道路上的眾生都能安住在清淨中,安心向道,不受外界打擾。這樣的悲心得到了許多金剛乘法王的一致認可並慷慨地送上最至誠的祝福。希望佛法可以利益臺灣人,帶給這片土地安詳的力量。 第二十六任 究給企仟法座
Thumbnail
大揭露報告就是我說的地球上部分正義聯盟的人員所做的簡短報告  我會固定放上來給各位參考!這也是我所知道的部分資訊來源喔^^   資料來源: http://blog.udn.com/17ab68df/131766214    2020年2月17日   Operation Disclosure 陰森國
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
美國總統大選只剩下三天, 我們觀察一整週民調與金融市場的變化(包含賭局), 到本週五下午3:00前為止, 誰是美國總統幾乎大概可以猜到60-70%的機率, 本篇文章就是以大選結局為主軸來討論近期甚至到未來四年美股可能的改變
Thumbnail
Faker昨天真的太扯了,中國主播王多多點評的話更是精妙,分享給各位 王多多的點評 「Faker是我們的處境,他是LPL永遠繞不開的一個人和話題,所以我們特別渴望在決賽跟他相遇,去直面我們的處境。 我們曾經稱他為最高的山,最長的河,以為山海就是盡頭,可是Faker用他28歲的年齡...
Thumbnail
柔軟具伸縮性的運動服裝,緩緩沿著身型塑出身體曲線,香奈爾按此概念設計服裝。
Thumbnail
今天的幣圈新聞關注在全球最大加密貨幣交易所幣安,知名雜誌曝幣安高管因監管原因集體離職,目前已受幣安官方證實。另外一則幣圈新聞則是:Blur V2 更新釋出,Gas 減少 50%!香港監管的下一步:證券型代幣、RWA。
Thumbnail
呃,本蛙身為虔誠佛教徒,當然要追隨師父參悟佛法,達到明心見性境界~ 賭輸不可恥,不敢賭才可恥,啥,就好比賭投機生技股輸了,就改賭鎖碼權證,萬一再輸了,就賭投機興櫃股,反正坐莊的不會輸,賠的都是別人…… 呃,你說這個舍利子有啥關係,嗯,關係是這樣的,「宗教大師」信徒雖多,卻燒不出舍利子。
Thumbnail
未開始之前,啊壽想定義一下今次數據文章主旨,有別於大家睇開的估值報告是次文章最重要是將在網上可摘取的數據作出圖像化,讓大家可以在閱讀財務報告相對輕鬆,容易理解當中內容。報告內容會以Tableau 及 Power BI 演示 ,而數據摘取截止到2022年10月尾..... 詳細內文可到: https:
Thumbnail
今年巴西自由土地營的主題是「奪回巴西:劃定領土及政治本土化」。來自巴西各地一百二十個原住民族共計五千多名領導人,譴責現任總統波索納洛的不當政策,也譴責聯邦國會「用筆墨來屠殺我們」(亦即透過傷害性立法)。
Thumbnail
別這麼快放棄,在這個觸及率超低的年代,還是有許多臉書專頁能在完全不投放廣告的情況下,經營的有聲有色,貼個文一呼百應,先不論轉換率或實際商業上有什麼幫助,至少貼文有人互動,品牌就自動給人一股接地氣的親民感。
Thumbnail
身為社群小編,對於《粉絲團洞察報告》數據應該都不陌生,谷哥大神們也都手把手教大家如何運用後台資料,強調「在對的時間貼文,才能提升能見度」,尤其現在臉書演算法一直在變,因此了解粉絲上線時間也就格外重要。 如果你的粉絲團以台灣為主,那你看到的後台圖表應該是長成以下這樣: 很奇怪吧?中午時間左看右看,明明
Thumbnail
七年級的學生拿到批改完的古典文學測驗卷時,一邊忐忑地說,「金魚老師一定超生氣的。」一邊湊上來我身旁說,「妳是不是很生氣啊?」 學生想像中的老師 我有點疑惑的望著她,一邊笑嘻嘻地說,「我為什麼要生氣?」 「因為我們某某老師就很生氣啊!」他們出現難得的緊張。 「可是是妳們考不好,又不是我考不好。」我還是
Thumbnail
佛法弘揚,刻不容緩! 尊貴龍德嚴淨仁波切,利益眾生的心極為強大,發願建造一處人間淨土,讓所有想走在佛法道路上的眾生都能安住在清淨中,安心向道,不受外界打擾。這樣的悲心得到了許多金剛乘法王的一致認可並慷慨地送上最至誠的祝福。希望佛法可以利益臺灣人,帶給這片土地安詳的力量。 第二十六任 究給企仟法座
Thumbnail
大揭露報告就是我說的地球上部分正義聯盟的人員所做的簡短報告  我會固定放上來給各位參考!這也是我所知道的部分資訊來源喔^^   資料來源: http://blog.udn.com/17ab68df/131766214    2020年2月17日   Operation Disclosure 陰森國