付費限定方格精選

門外漢的影像轉譯(Image-to-Image Translation)

更新於 2020/07/15閱讀時間約 37 分鐘
影像轉譯演算法們以及他們的損失函式分解一覽圖。y-axis 是損失項的種類, x-axis 則是該損失項的係數,用來代表該損失項的相對重要性。
上圖為本文提到的影像轉譯演算法們以及他們的損失函式分解一覽圖。如果想知道更多關於影像轉譯演算法,請繼續閱讀。
在影像生成的領域中,其中一個富有挑戰的是影像對影像的轉譯(image to image translation) 問題。取決於問題的設計,需要兩組各自屬於不同領域(domains)的影像集作為輸入。這兩組影像集,根據轉譯的方向,可以分別稱為來源影像集,以及目標影像集。 影像轉譯是透過模型學習來源和目標影像集之間的映射關係,給定一個來源影像作為輸入,模型則生成一個符合目標領域分佈的影像。
提到生成影像的模型,在深度學習中快速獲得大眾歡迎的生成對抗網路(Generative Adversarial Network),簡稱為 GAN。架構上為兩個網路,一個是 Generator,另一個則是 Discriminator。兩個網路共同最佳化一個損失函示,只是最佳化的方向相反。

Outline:

Conditional GAN (cGAN)

Mode Collapse

Paired Image-to-Image

Unpaired image-to-image

Cycle Consistency

Attention-Guided Methods

Normalization


以行動支持創作者!付費即可解鎖
本篇內容共 14889 字、0 則留言,僅發佈於翻滾吧!駭客女孩!你目前無法檢視以下內容,可能因為尚未登入,或沒有該房間的查看權限。
avatar-img
71會員
35內容數
<p>專為年輕的女孩設計的科學/資訊科技寫作計畫,希望讓每位女孩在體脂肪、青春痘與暗戀對象之外,還能找到新的生活樂趣。</p>
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
Rene Wang的沙龍 的其他內容
梯度下降學習法雖然是一個有效的最佳化方法,然而因為梯度本身屬於局部變化,因此有三個陷阱,而未能到達全域最小值的命運。他們分別是:局部最小值, 初始值和病態的二階導數矩陣。我們將解釋這些最佳化陷阱的成因,以及提出相對應的方法。這些方法包括了使用 mini-batch,加入處罰項和 early stop
臉書的營運長,雪柔‧桑德伯格,在 2013 年《挺身而進》一書中,指出女性在職場中的困境,而有些困境是來自於對自己的限制,如缺乏自信和兼顧一切。在這系列的文章中,駭客女孩側寫許多挺身而進的女性工程師或創業者,甚至年輕的城市教育家,他們如何突破固有性別的限制,以創意的方式來教導,鼓勵女性參與工程領域。
這篇文章從類神經網路的起源,也就是單神經元的感知器。簡單的感知器迭代演算法使單神經元可以學習,但卻無法學習超過非線性,如 XOR 的資料分布。另外,本文還介紹了 Logistic regression,藉由透過非線性轉換來使線性輸出近似於機率分佈。最後則以一場大師賭局結束(SVM vs NN)。
在 2018 年,筆者介紹了普華永道(PwC)關於人工智慧的十項預測。我們將要藉由這篇文章,先來回顧在過去的一年中,電腦視覺和自然語言領域有什麼新的發展。在本文的最後,則提及 PwC 在今年提出的六項建議,主要使已投資 AI 的公司能成功商轉,以及關於自動化資料處理和機械學習的現況。
本文提到如何以類神經網路為主的深度學習方法,來進行物體偵測。文中包括基礎的物體偵測簡介:如影像問題分類,影像處理和傳統非類神經網路為主的物體偵測方法。這些傳統方法,仍可以在類神經網路的方法中找到其應用。最後簡略敘述當前使用深度卷積網路作為物體偵測的主要研究方向,並對學術界常用的訓練資料集做分析介紹。
在此篇文章終將會簡述機械學習的發展,簡介深度學習以 Sequence to Sequence 為架構,並在多場機械翻譯的學術年會,獲得成績斐然的結果。在本文中,會粗略介紹 Sequence to Sequence 架構並以 google 在 2017 對Seq2Seq 所進行的大規模參數。
梯度下降學習法雖然是一個有效的最佳化方法,然而因為梯度本身屬於局部變化,因此有三個陷阱,而未能到達全域最小值的命運。他們分別是:局部最小值, 初始值和病態的二階導數矩陣。我們將解釋這些最佳化陷阱的成因,以及提出相對應的方法。這些方法包括了使用 mini-batch,加入處罰項和 early stop
臉書的營運長,雪柔‧桑德伯格,在 2013 年《挺身而進》一書中,指出女性在職場中的困境,而有些困境是來自於對自己的限制,如缺乏自信和兼顧一切。在這系列的文章中,駭客女孩側寫許多挺身而進的女性工程師或創業者,甚至年輕的城市教育家,他們如何突破固有性別的限制,以創意的方式來教導,鼓勵女性參與工程領域。
這篇文章從類神經網路的起源,也就是單神經元的感知器。簡單的感知器迭代演算法使單神經元可以學習,但卻無法學習超過非線性,如 XOR 的資料分布。另外,本文還介紹了 Logistic regression,藉由透過非線性轉換來使線性輸出近似於機率分佈。最後則以一場大師賭局結束(SVM vs NN)。
在 2018 年,筆者介紹了普華永道(PwC)關於人工智慧的十項預測。我們將要藉由這篇文章,先來回顧在過去的一年中,電腦視覺和自然語言領域有什麼新的發展。在本文的最後,則提及 PwC 在今年提出的六項建議,主要使已投資 AI 的公司能成功商轉,以及關於自動化資料處理和機械學習的現況。
本文提到如何以類神經網路為主的深度學習方法,來進行物體偵測。文中包括基礎的物體偵測簡介:如影像問題分類,影像處理和傳統非類神經網路為主的物體偵測方法。這些傳統方法,仍可以在類神經網路的方法中找到其應用。最後簡略敘述當前使用深度卷積網路作為物體偵測的主要研究方向,並對學術界常用的訓練資料集做分析介紹。
在此篇文章終將會簡述機械學習的發展,簡介深度學習以 Sequence to Sequence 為架構,並在多場機械翻譯的學術年會,獲得成績斐然的結果。在本文中,會粗略介紹 Sequence to Sequence 架構並以 google 在 2017 對Seq2Seq 所進行的大規模參數。
你可能也想看
Google News 追蹤
Thumbnail
投資新手大多從身邊市場開始著手,選擇台股市場入門,單筆投資或台股定期定額投資,隨著經驗累積,進入美股市場也是好選擇,這篇文章帶你前進美股投資,證券開戶選擇國內券商複委託,使用美股定期定額投資,並以國泰 CUBE App為例說明。 內容目錄: 1.一站式開戶:以國泰世華 CUBE App 為例
Thumbnail
這是張老師的第三本書,我想前二本應該也有很多朋友們都有讀過,我想絕對是受益良多,而這次在書名上就直接點出,著重在從投資的角度來切入
Thumbnail
玉子燒,土豆,曲奇餅乾,藍盒柚子軟糖,傘,生日帽,樹葉書簽,這些意象組合起來,就構成一個家的符號集群。它們沿著情節若隱若現,似斷還連,串起一家三代人的生活剖面,銜續成難分難解的血緣脈絡與親情糾葛。而符號的重複利用以及“從一到多”的映射關係,實際上正是既為偵探小說,也為所有藝術所尊崇的金科玉律:簡潔。
Thumbnail
前幾天SS 告訴我,她覺得她已經有中年危機了。我問她為何她會覺得如此?  SS:「覺得好像過去的行事作風好像不管用了,尤其是跟年輕同事的相處,覺得有種格格不入的感覺。」 我:「本來世代不同,就會不一樣,心態上要 open 一點,接受多元的人。就像是去國外念書一樣,不同國家的人想法都不一樣,沒有誰對誰
Thumbnail
English:win -- number one + get the prize + gain + best + first + victory;win = w.in = doubleU.in = dot匸貝luna一凵.點几 = 點匸貝月口.丶几 = 丶匸貝月口.凡 = 亡貝月口凡 = 贏
Thumbnail
偶爾遇到病人看起來像是中邪的表現 : 或眼睛上吊/歪斜 ,或臉歪嘴斜 , 或舌頭捲曲, 或頸背部/四肢肌肉孿縮, 甚至講話語意不清...... 通常打一針之後沒多久立馬改善, 每次都會被家屬認為很神 ^^! 這種"錐體外症候群"是因為身體的運動系統受到干擾,導致無法正常靈活作用, 會發生
Thumbnail
   「連結自己和孩子的是『血』還是『時間』?」在這片中不僅以後者作為回答,在劇情結構上,更以像/不像作為一組符碼,辯證出人性中的同然/異然,最後刻畫出人與人之間情感上的分/和。血緣形成不同家庭,能力塑造不同群體,然而我們如何能在差異中學會和他人真實交流不分彼此,是本片所開展出來具人文關懷的縱深視野
Thumbnail
投資新手大多從身邊市場開始著手,選擇台股市場入門,單筆投資或台股定期定額投資,隨著經驗累積,進入美股市場也是好選擇,這篇文章帶你前進美股投資,證券開戶選擇國內券商複委託,使用美股定期定額投資,並以國泰 CUBE App為例說明。 內容目錄: 1.一站式開戶:以國泰世華 CUBE App 為例
Thumbnail
這是張老師的第三本書,我想前二本應該也有很多朋友們都有讀過,我想絕對是受益良多,而這次在書名上就直接點出,著重在從投資的角度來切入
Thumbnail
玉子燒,土豆,曲奇餅乾,藍盒柚子軟糖,傘,生日帽,樹葉書簽,這些意象組合起來,就構成一個家的符號集群。它們沿著情節若隱若現,似斷還連,串起一家三代人的生活剖面,銜續成難分難解的血緣脈絡與親情糾葛。而符號的重複利用以及“從一到多”的映射關係,實際上正是既為偵探小說,也為所有藝術所尊崇的金科玉律:簡潔。
Thumbnail
前幾天SS 告訴我,她覺得她已經有中年危機了。我問她為何她會覺得如此?  SS:「覺得好像過去的行事作風好像不管用了,尤其是跟年輕同事的相處,覺得有種格格不入的感覺。」 我:「本來世代不同,就會不一樣,心態上要 open 一點,接受多元的人。就像是去國外念書一樣,不同國家的人想法都不一樣,沒有誰對誰
Thumbnail
English:win -- number one + get the prize + gain + best + first + victory;win = w.in = doubleU.in = dot匸貝luna一凵.點几 = 點匸貝月口.丶几 = 丶匸貝月口.凡 = 亡貝月口凡 = 贏
Thumbnail
偶爾遇到病人看起來像是中邪的表現 : 或眼睛上吊/歪斜 ,或臉歪嘴斜 , 或舌頭捲曲, 或頸背部/四肢肌肉孿縮, 甚至講話語意不清...... 通常打一針之後沒多久立馬改善, 每次都會被家屬認為很神 ^^! 這種"錐體外症候群"是因為身體的運動系統受到干擾,導致無法正常靈活作用, 會發生
Thumbnail
   「連結自己和孩子的是『血』還是『時間』?」在這片中不僅以後者作為回答,在劇情結構上,更以像/不像作為一組符碼,辯證出人性中的同然/異然,最後刻畫出人與人之間情感上的分/和。血緣形成不同家庭,能力塑造不同群體,然而我們如何能在差異中學會和他人真實交流不分彼此,是本片所開展出來具人文關懷的縱深視野