AI「深度學習」的缺陷及我親身的補正?─科技智慧(5)

更新 發佈閱讀 14 分鐘

作者:陳華夫

2019年10月初,「華為莫斯科研究所」的幾名研究人員以特殊設計的「對抗紋路」可以成功迷惑(干擾)MTCNN(多任務卷積神經網路)的人臉辨識。這種欺騙圖像識別已成為了人工智慧行業裡時髦的「干擾遊戲」。(見深度學習:新時代的鍊金術

類似的實驗最近幾年頻繁出現。從圖像識別語音辨識,各種基於少量訊息輸入的「對抗性」和「干擾性」因素可以輕易地造成深度學習(Deep Learning)算法的人工智慧系統的判別錯誤。

相比之下,人類的認知可不會這麼容易被干擾。例如很多人都有過「茫茫人海中,一眼認出你」的體驗,為何人臉辨識系統抗干擾能力比起人類是望塵莫及的?這就凸顯深度學習已經走入了類似鍊金術一樣的窘境。需要從新的認知演算法構造角度去奠定人工智慧解釋性的基礎。

從2012年卷積神經網路AlexNet出現開始,伴隨著人工智慧技術的快速發展,其核心算法深度學習在參數規模和演算法複雜度上一路狂飆,目前已經達到十幾億參數的規模。如此複雜的演算法,需要大數據支持其進行模型訓練。就如同一頭越長越大的怪獸,需要更多的食物餵鵝。但餵鵝出的這頭深度學習怪獸能夠在特定領域達到或接近人類的「認知能力」嗎?很可惜,還差得遠。目前的深度學習算法還是以一種類似於鍊金術的方式進行構建的。

raw-image

這種鍊金術式的方法,業界稱為黑盒模型(Black-box modelling):也就是說,高度複雜的多層次演算法形成類似於一個不可打開的黑盒子,我們只能依賴於系統的輸入輸出對黑盒內部的關聯關係進行調整和優化,最終形成的最佳模型,但無法詳細地拆解,分析 與解釋

人工智慧技術已經在部分領域把人類的水平遠遠地甩在了身後,但相比人類的認知能力,仍屬「弱人工智能」─即不能真正地推理(Reasoning)和解決問題(Problem_solving),及不能擁有如人類智慧的自主意識。

目前的深度學習模型存在三大重要缺陷:

1)監督學習需要大量人工標註數據,在有明確學習目標並了解對錯的前提下進行學習並獲取知識。換句話說,人工智慧系統在學習(模型訓練)的過程中必須一手拿著習題,一手拿著正確答案。如果沒有正確答案,人工智慧系統完全無從判斷哪個結果是正確的,哪個結果是錯誤的,也就無法開展學習過程。

但人類在嬰兒時期,主要的學習過程是處於無目標、無對錯的狀態。嬰兒對於外界的絕大部分認知,如認識家人及各種物體玩具,乃至對於抽象概念的認知如時間、空間、重力等,都是在沒有任何指導和正確答案的情況下完成的。對於動物來說,由於缺乏同類指導幫助,有監督學習的方式更為罕見。就算是沒有學過「人類」的定義,狗也不會混淆人和其它靈長類動物。和深度學習人工智慧系統相比,動物都是無師自通的歸納高手,更不用說人類了。

2)人工智慧無法提煉出規則,無法模塊化知識。由於我們進行的是「黑盒訓練」,在模型得到滿意的預測結果後,我們就可以認為該人工智慧系統獲得了特定領域問題的知識。但模型內部的複雜關聯卻無法清晰拆解,更無法提煉成為顯性的知識或規則,最終也就無法從邏輯上確認模型內部知識的正確性。

當然,模型的有效性是可以通過實踐數據驗證的。但有效性和正確性往往是不能劃等號的。這就好像是拿著海量的帶有正確答案的選擇題讓人工智慧系統學習,最終取得了不錯的評估結果。當然人工智慧系統有可能掌握了一些知識點,但也有可能是人工智慧系統發現了「三長一短選最短,三短一長選最長,兩長兩短就選B,同長同短就選A」這樣的答題「秘笈」,從而取得了不錯的成績。但由於演算法的複雜性導致無法分辨和拆解「有效知識」和「無效知識」,最終只能全部接受或捨棄。

由於訓練數據記憶體在著類似於「秘笈」一樣的規則(我們稱為認知偏誤),再加上模型無法提煉出明確的規則(規律),所以深度學習模型結果一定混雜了部分錯誤的知識。這就是為什麼基於少量的干擾訊息,就可以輕易造成人工智慧統的誤判。因為這些干擾訊息往往準確地命中了系統錯誤的知識

3)人類的學習通常能夠學習轉移(Transfer of learning)─即把學習到的知識及技能舉一反三的應用到新的情況或不同的領域。但人工智慧系統的學習卻不能,這是因為深度學習演算法是無法提煉出規則知識。那就意味著,無法舉一反三的學習轉移─也就是說,每次碰到類似問題,並非提煉舊有的知識,應用到新系統中,而必需重建和訓練新系統。例如,Google的DeepMind公司發展AlphaGo LeeAlphaGo Master,及AlphaGo Zero等3個版本時,各個版本都是獨立構造,和獨立進行訓練的,也就是說,各版本的圍棋知識無法舉一反三的學習轉移到其它的版本上,造成資源浪費。

圖像識別場景下也是同樣的情況。當一個系統能夠正常識別人的面部後,如果需要識別被遮擋住左側或者右側的面部,模型必須使用大量的單側人臉圖片進行訓練,其工作量和訓練全新模型相差不大。這說明「正常臉部辨識模型」的知識並未舉一反三的應用到新的模型上。而對於一個人類嬰兒來說,他一旦具備識別某種物體的能力,那麼只要稍加引導,他就能夠通過物體的局部特徵來識別整個物體,這就證明了說嬰兒具有學習轉移的能力。這也是為什麼目前人工智慧系統對模糊或殘缺字體的識別準確度不高,而人類卻可以輕易完成的原因。

對於人類來說,知識是可以分解組合的,及舉一反三的學習轉移到新領域。而人工智慧知識目前還呈現出不可分割的一個整體狀態,大大局限了人工智慧的應用場景和迭代優化速度,甚至在知識的準確性上被質疑和拷問。

鍊金術一樣,方士們(數據科學家)收集到各種奇異的材料(數據),一股腦丟進巨大的爐子(深度學習模型)中進行煉製(訓練),在煉製時間足夠長以後,倒出成品查看是不是變成了黃金。在鍊金術的整個過程中,方士們其實並不知道煉製的原理是什麼,只是在嘗試各種不同的材料和煉製流程的組合,希望憑著運氣找到正確的煉製方案。是「知其然而不知所以然」的鍊金術化學,還需要「近代化學之父」拉瓦錫類似「科學化人工智慧之父」從新的認知方式與演算法構造角度奠定人工智慧解釋性的基礎,催生科學化人工智慧系統,使其具有:1)知識的獲取以非監督學習方式為主。最終的知識成果包含「抽象概念」的定義和生成,而這個「抽象概念」是基於數據本身的規則(規律)所確定的,有清晰的邊界和適用場景;2)知識的提煉在於洞察大數據之間的因果關係,並對部分包含偏見的數據有相當的抗干擾能力;3)知識可以通過因果關係進行提煉和描述,並可以通過邏輯推理進行確認;4)知識系統具備完全之舉一反三的學習轉移的能力,並有革命性的演算法,及突破性的模型的可解釋性,只有把黑盒模型真正轉變為「白盒(透明)模型」,真正的人工智慧時代才會到來。

我對「AI 深度學習」的缺陷及補正的看法與此文大致相同,所以讀了此文可說是深獲我心。我的知識學習網站的問學公司在兩年前,2017/8月初版了「現代流圍棋:如何簡單對戰ALPHAGO-II (第一集)」一書,隨後在youtube及「騰訊」上,製作了數百個視頻討論「現代流圍棋」。

就在書本出版後不久,谷歌的DeepMind公司又發表了最新版: AlphaGo Zero(AGZ),它並非如它的前身─AlphaGo─使用人類棋手玩過的數千盤棋所積累起來的數據來培訓,AlphaGo Zero的算法完全是「自學成才」的。AlphaGo Zero經過3天的學習就以100:0的比數擊敗AlphaGo Lee的實力,而在21天後達到了AlphaGo Master的水平,並在40天內超過了所有之前的版本,成為史上無敵的圍棋軟體。(詳細,見拙文「人工智慧」的AlphaGo「圍棋革命」─圍棋的本質(1)

然而,自學的AlphaGo Zero仍是基於深度學習,其演算法是「由下而上」的規則性(rule-based),而人類的圍棋智慧卻是「由上而下」的理論性(theory based),也就是說,人類智慧是一種理論洞識,而「理論」是高過「規則」一個檔次─因為理論可以解釋觀察所發現的規則。所以人類智慧高人工智慧一個檔次。而我就成功的抽取出圍棋的理論現代流圍棋五原則,並以它奮戰「ZenGo 九段」與「Katrain 9段」。在經過4、5年,我現在已能有系統的持白大勝「ZenGo 九段」與「Katrain 9段」,證明了人類智慧還是有機會戰勝人工智慧的電腦圍棋軟體。(請看拙文如何正確的戰勝AI電腦圍棋「Katrain 9段」?─圍棋本質(9)、及youtube視頻現代流5原則對戰職業九段,9P系列(60─100)─ 陳華夫持白狂勝「Katrain 9段」144目半

我能以「抽象概念」的現代流圍棋五原則擊敗(干擾)「ZenGo 九段」與「Katrain 9段」電腦圍棋,其意義類似當今時髦的愚弄人工智慧的「干擾遊戲」。也同時證明了,人類的圍棋智慧卻是「由上而下」的理論洞識,最終可能戰勝有史以來最強的AI人工智慧電腦圍棋─ AlphaGo Zero

請看「陳華夫專欄」─科技與智慧─系列文章:

電動汽車世界爭霸啟示錄之(1)─科技與智慧(1)
什麼是「耳機主動式」降噪?─科技智慧(2)
從打「高爾夫球」看「人工智慧」與人類學習之差異─科技智慧(3)
臉書、Line、youbube、方格子等數位平台的差異與經營之道(修訂版)─科技智慧(4)
AI「深度學習」的缺陷及我親身的補正?─科技智慧(5)
美中彈道導彈之異地異時攻擊的衛星太空爭霸錄─科技與智慧(6)
「斜槓族」、「兩棲青年」、與「空巢青年」的人生─科技與智慧(7)
何謂量子晶片?美中「量子科技」爭霸錄─科技與智慧(8)
「模式識別」本質上是「腦筋單槓」─科技與智慧(9)
「模式識別」─我40年的鍛鍊腦力的秘笈─「腦筋拉單槓」─科技與智慧(10)
諾貝爾獎的教育反思─「自學」與「學校教育」─科技與智慧(11)
璀璨的諾貝爾獎「拍賣理論」之評估「台股上市股票交易」與「5G頻段招標」─科技與智慧(12)
馬雲通過「合夥人制」及「有限合夥制」實際控制阿里巴巴及螞蟻集團─科技與智慧(13)
6G太赫茲(THz)通訊技術─科技與智慧(14)
蘋果新款「M1晶片」之AI晶片爭霸戰─科技與智慧(15)
第三代半導體的手機明星配件─「超小型65W GaN(氮化鎵)快速充電器」─科技智慧(16)
什麼是「人造太陽」(可控核聚變(融合))─科技與智慧(17)
AZ及強生腺病毒疫苗造成血拴之主要機轉─科技與智慧(18)
什麼是「快速光介質」隱身斗篷─科技與智慧(19)
「碳基晶片」及「奈米碳管」世界爭霸錄─科技與智慧(20)
電動汽車世界爭霸啟示錄之(2)─科技與智慧(21)
臺灣老人拒打AZ疫苗的背後真相─科技與智慧(22)
施打何種疫苗對新冠變種毒株有效?─科技與智慧(23)
警惕「網路工程師」職場的陷阱─科技與智慧(24)
WHO所批准的七種新冠(COVID-19)疫苗─科技與智慧(25)
台積電可能造成臺灣「荷蘭病」之真相─「科技與智慧」(26)
美遭「勒索軟件」勒贖5百萬美元的本質及正確處理的真相─科技與智慧(27)
美國最大油管商付贖金440萬美元的深刻教訓─科技與智慧(28)
血氧濃度降低是戴口罩運動猝死的真相─科技與智慧(29)
誰適合唸「理工科」?─替臺灣產學合作之「半導體學院」把脈─科技與智慧(30)
電動汽車世界爭霸啟示錄(II)─科技與智慧(31)
中美博奕大戰略之中美尖端高科技爭霸的真相─科技與智慧(32)
智慧舒適的側睡治打鼾─科技與智慧(33)

科學方法學物理與人工智慧(15/40)─學習電磁學的第一天塹(超級瓶頸)curl(即▽ x)的克服

深度學習:新時代的鍊金術

谷歌在下一盤「人工智慧」大棋

AlphaGo設計師黃士傑:「最強的學習技能在人類的腦袋裡」

AlphaGo的自學能力更強了

AlphaGo輕鬆擊敗圍棋世界冠軍柯潔

AlphaGo Zero自學成才,輕易擊敗上一代AlphaGo

人工智慧已經「自學成才」了,人怎麼辦?

AlphaGo輕鬆擊敗圍棋世界冠軍柯潔

AlphaGo Zero自學成才,輕易擊敗上一代AlphaGo

人工智慧已經「自學成才」了,人怎麼辦?

創性思考與智慧學習(18 /40)─「人工智能」有「思考力」嗎?

學會學習Learning to Learn:讓AI擁有核心價值觀從而實現快速學習

最前沿:百家爭鳴的Meta Learning/Learning to learn

潘洛斯(Roger Penrose):意識並非一種高速、精密的計算工具,它本質上就與電腦與人工智慧不同

超級模型算法之外,人機協同道路浮現

留言
avatar-img
陳華夫hwafuchen的沙龍
485會員
252內容數
思想家─理解、解釋、預測世界。發表:9篇「深度政經分析」、6篇「現代開悟之洞識」、10篇「學習的本質」、13篇「美中關係」、4篇「驀然回首」、21篇「文學與藝術」、36篇「科技與智慧」、9篇「圍棋的本質」、40篇「美中經濟」、28篇「美股的本質」、12篇「美聯儲的本質」、12篇「貨幣及美元的本質」,共201篇。
2025/01/31
作者:陳華夫 如DeepSeek版慈禧太后一樣,這個「有氣質的現代中國女士」中,有光線、陰影、立體感、和深度感等繪畫細節,但網友也請ChatGPT生成中國美女,並認其姿色較佳。但我卻認為DeeSeek較高明,一般人喜歡韓劇整形過、不食人間煙火的美少女,証明ChatGPT生成不了有氣質的中國青春少女。
Thumbnail
2025/01/31
作者:陳華夫 如DeepSeek版慈禧太后一樣,這個「有氣質的現代中國女士」中,有光線、陰影、立體感、和深度感等繪畫細節,但網友也請ChatGPT生成中國美女,並認其姿色較佳。但我卻認為DeeSeek較高明,一般人喜歡韓劇整形過、不食人間煙火的美少女,証明ChatGPT生成不了有氣質的中國青春少女。
Thumbnail
2020/08/13
作者:陳華夫 美國總統川普(74歲)的侄女瑪麗·川普(55歲)在2020/7/14日出版了一本書《過多與永匱(Too Much and Never Enough)—我的家庭如何造就這世界最危險的男人》(見中譯版:特朗普家人爆料:我的家庭如何造就這世界最危險的男人(上,下)。
Thumbnail
2020/08/13
作者:陳華夫 美國總統川普(74歲)的侄女瑪麗·川普(55歲)在2020/7/14日出版了一本書《過多與永匱(Too Much and Never Enough)—我的家庭如何造就這世界最危險的男人》(見中譯版:特朗普家人爆料:我的家庭如何造就這世界最危險的男人(上,下)。
Thumbnail
2020/07/13
作者:陳華夫 我當初在社交平台Line上,與舊識好友「早安」之餘,還貼了些感觸牢騷的文章,偶而也搏得「按讚」,但貼文不能太長,數百字就會「洗版」掉他人的貼文。於是在友人建議下,我以「部落格」連結代替貼文。一來可以寫點長文,二來不必費勁
Thumbnail
2020/07/13
作者:陳華夫 我當初在社交平台Line上,與舊識好友「早安」之餘,還貼了些感觸牢騷的文章,偶而也搏得「按讚」,但貼文不能太長,數百字就會「洗版」掉他人的貼文。於是在友人建議下,我以「部落格」連結代替貼文。一來可以寫點長文,二來不必費勁
Thumbnail
看更多
你可能也想看
Thumbnail
在 vocus 與你一起探索內容、發掘靈感的路上,我們又將啟動新的冒險——vocus App 正式推出! 現在起,你可以在 iOS App Store 下載全新上架的 vocus App。 無論是在通勤路上、日常空檔,或一天結束後的放鬆時刻,都能自在沈浸在內容宇宙中。
Thumbnail
在 vocus 與你一起探索內容、發掘靈感的路上,我們又將啟動新的冒險——vocus App 正式推出! 現在起,你可以在 iOS App Store 下載全新上架的 vocus App。 無論是在通勤路上、日常空檔,或一天結束後的放鬆時刻,都能自在沈浸在內容宇宙中。
Thumbnail
vocus 慶祝推出 App,舉辦 2026 全站慶。推出精選內容與數位商品折扣,訂單免費與紅包抽獎、新註冊會員專屬活動、Boba Boost 贊助抽紅包,以及全站徵文,並邀請你一起來回顧過去的一年, vocus 與創作者共同留下了哪些精彩創作。
Thumbnail
vocus 慶祝推出 App,舉辦 2026 全站慶。推出精選內容與數位商品折扣,訂單免費與紅包抽獎、新註冊會員專屬活動、Boba Boost 贊助抽紅包,以及全站徵文,並邀請你一起來回顧過去的一年, vocus 與創作者共同留下了哪些精彩創作。
Thumbnail
大學生的福音!不用再費心解微積分、線性代數、微分方程的習題了!但這真的是「福音」嗎?AI 已經可以解出大學程度的數學問題,並且以人類聽得懂得方式講解。
Thumbnail
大學生的福音!不用再費心解微積分、線性代數、微分方程的習題了!但這真的是「福音」嗎?AI 已經可以解出大學程度的數學問題,並且以人類聽得懂得方式講解。
Thumbnail
作者:陳華夫 AI人工智慧不如人類智慧的地方有三點:(1)它的「演算法」(algorithm)只能建構規則,而人類卻可建構解釋規則的理論。(2)它無法處理兩三個地方的「聯立」利益,這需要長遠的「大局觀」。(3)它無法吸取失敗的教訓,反敗為勝。(4)電腦圍棋有打劫的盲點。
Thumbnail
作者:陳華夫 AI人工智慧不如人類智慧的地方有三點:(1)它的「演算法」(algorithm)只能建構規則,而人類卻可建構解釋規則的理論。(2)它無法處理兩三個地方的「聯立」利益,這需要長遠的「大局觀」。(3)它無法吸取失敗的教訓,反敗為勝。(4)電腦圍棋有打劫的盲點。
Thumbnail
「ZenGo 7」不鑽研棋理,一直使用騙著,欺負對手,棋力不得長進。對手棋力增加,而識破騙著,就挨打認輸,實在是不可取的「魯蛇」(loser,失敗者)的人生哲學,希望天下的圍棋棋手引以為戒。我計畫改進目前世界上最強的開源電腦圍棋軟體之「Katrain 9段」,成為超級「Katrain 9段」。
Thumbnail
「ZenGo 7」不鑽研棋理,一直使用騙著,欺負對手,棋力不得長進。對手棋力增加,而識破騙著,就挨打認輸,實在是不可取的「魯蛇」(loser,失敗者)的人生哲學,希望天下的圍棋棋手引以為戒。我計畫改進目前世界上最強的開源電腦圍棋軟體之「Katrain 9段」,成為超級「Katrain 9段」。
Thumbnail
儘管大家對於人工智慧各種面向有著非常多不同的看法,但若說到人工智慧實力的劃分,一般我們常把它分成三個等級,狹義人工智慧、廣義人工智、以及超級人工智慧...
Thumbnail
儘管大家對於人工智慧各種面向有著非常多不同的看法,但若說到人工智慧實力的劃分,一般我們常把它分成三個等級,狹義人工智慧、廣義人工智、以及超級人工智慧...
Thumbnail
「定石」是在棋盤的角部及其周邊,黑、白局部子力在1比1,或頂多1比2的情況下,局部子力平衡的攻防走法。電腦圍棋(如AlphaGo、ZenGo等)不會給人類施展「定石」的機會。要獵殺ZenGo 九段,得靠它不懂的、更高明的「現代流第5原則─埋伏餘味」。
Thumbnail
「定石」是在棋盤的角部及其周邊,黑、白局部子力在1比1,或頂多1比2的情況下,局部子力平衡的攻防走法。電腦圍棋(如AlphaGo、ZenGo等)不會給人類施展「定石」的機會。要獵殺ZenGo 九段,得靠它不懂的、更高明的「現代流第5原則─埋伏餘味」。
Thumbnail
其實 我標題很想下:   把高永夏打到退出棋壇的神秘高手 — Alphago
Thumbnail
其實 我標題很想下:   把高永夏打到退出棋壇的神秘高手 — Alphago
Thumbnail
作者:陳華夫 在經過4、5年,我現在已能有系統的持白大勝「ZenGo 九段」與「Katrain 9段」,證明了人類智慧還是有機會戰勝人工智慧的電腦圍棋軟體。
Thumbnail
作者:陳華夫 在經過4、5年,我現在已能有系統的持白大勝「ZenGo 九段」與「Katrain 9段」,證明了人類智慧還是有機會戰勝人工智慧的電腦圍棋軟體。
Thumbnail
現代流圍棋五原則能擊敗(干擾)「ZenGo 九段」與「Katrain 9段」電腦圍棋,其意義類似當今時髦的愚弄人工智慧的「干擾遊戲」。也同時證明了,人類的圍棋智慧卻是「由上而下」(Top-Down)的「知識策略」,最終可能戰勝有史以來最強的AI人工智慧電腦圍棋─ AlphaGo Zero。
Thumbnail
現代流圍棋五原則能擊敗(干擾)「ZenGo 九段」與「Katrain 9段」電腦圍棋,其意義類似當今時髦的愚弄人工智慧的「干擾遊戲」。也同時證明了,人類的圍棋智慧卻是「由上而下」(Top-Down)的「知識策略」,最終可能戰勝有史以來最強的AI人工智慧電腦圍棋─ AlphaGo Zero。
Thumbnail
現代流圍棋五原則能擊敗(干擾)「ZenGo 九段」與「Katrain 9段」電腦圍棋,其意義類似當今時髦的愚弄人工智慧的「干擾遊戲」。也同時證明了,人類的圍棋智慧卻是「由上而下」(Top-Down)的「知識策略」,最終可能戰勝有史以來最強的AI人工智慧電腦圍棋─ AlphaGo Zero。
Thumbnail
現代流圍棋五原則能擊敗(干擾)「ZenGo 九段」與「Katrain 9段」電腦圍棋,其意義類似當今時髦的愚弄人工智慧的「干擾遊戲」。也同時證明了,人類的圍棋智慧卻是「由上而下」(Top-Down)的「知識策略」,最終可能戰勝有史以來最強的AI人工智慧電腦圍棋─ AlphaGo Zero。
Thumbnail
不論媒體如何擬人化AlphaGo,它也從未「理解」遊戲帶給人類的愉悅感,與極度專注當下而超越當下的心流。什麼樣的「遊戲」可以讓不同人、不同世代,從中獲得刺激與樂趣?怎樣的「規則」可以不斷反覆的玩、幾百年的玩,還不被「破解」,仍有尋找到創意策略的樂趣?換句話說,AlphaGo能成為世界圍棋冠軍,但它不
Thumbnail
不論媒體如何擬人化AlphaGo,它也從未「理解」遊戲帶給人類的愉悅感,與極度專注當下而超越當下的心流。什麼樣的「遊戲」可以讓不同人、不同世代,從中獲得刺激與樂趣?怎樣的「規則」可以不斷反覆的玩、幾百年的玩,還不被「破解」,仍有尋找到創意策略的樂趣?換句話說,AlphaGo能成為世界圍棋冠軍,但它不
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News