OpenAI高管第一次在台灣演講@政大!通用AI的關鍵技術與未來機會|怪獸科技公司|你與科技的距離 EP7.1

更新於 發佈於 閱讀時間約 8 分鐘
怪獸科技公司第二季,一起培養在快速變化社會的超強適應力!
🗣️收聽Podcast|🙋追蹤怪獸|📰訂閱怪獸雙週快報|🤖來找怪獸

AI 除了讓工作有了更多新的可能,帶來了新的商業契機,也在各個領域展現出巨大的潛力。

這次的內容,我將分享在政大聽完 OpenAI 的執行長技術顧問(Technical Advisor to the CEO) Dr. Mohammad Bavarian 在台灣的第一場演講,透過 OpenAI 官方的視角,探討人工通用智慧(AGI)的關鍵技術和未來趨勢。

Mohammad Bavarian 博士參與了 GPT-3、GPT-4 以及 Plugin 的開發

Mohammad Bavarian 博士參與了 GPT-3、GPT-4 以及 Plugin 的開發

AI 學習的底層邏輯:機器學習是什麼?

我們可以先想想看,訓練 AI 的類神經網路(深度學習)已經有超過十年以上的歷史,然而,為什麼 2022 年末會成為生成式 AI 的引爆點,讓 ChatGPT 成為新社群 Threads 外,最快破億的應用?

🙋 收聽 Podcast:OpenAI 高管第一次在台灣演講@政大!

機器學習(讓機器/電腦學習)分成三種方式,監督式學習、非監督式學習,以及強化式學習。

本文作者 王政皓整理

本文作者 王政皓整理

監督式學習(Supervised learning),指的是已經有標記好的資料,讓 AI 學習如何分類。舉例來說,若是要辨別圖像是否為昆蟲,訓練方式就會是透過人工,直接讓機器了解蝴蝶是昆蟲,蜘蛛不是昆蟲,藉以讓機器透過比對找出規律。

相對地,非監督式學習(Unsupervised Learning)沒有資料標記(label),會讓 AI 自己觀察無標籤資料,透過解析結構找到相同特徵,進而分類資訊。

至於第三種強化式學習(Reinforcement Learning),則是過程未知的狀態,根據結果作出獎勵。換言之,它會透過人類反饋(reward)進行深層式的學習,根據不同狀況作出決定,不斷試錯找到最好的方式,像是擊敗頂尖棋士的 AlphaGo 就是個非常經典的例子。

OpenAI 這樣的 AGI 到底是怎麼學習的呢?

讓 ChatGPT 具有強大反饋能力的關鍵,就是非監督式學習和強化式學習,讓模型能從未標記的資料以及非結構化的談話中學習。

raw-image

具體來說,OpenAI 的第一階段是建立自然語言訓練模型:transformer 架構,透過「語境分析」和「識別等對語言」進行分類與歸納;第二階段進行非監督式學習,在網路上大規模搜集尚未被標記的語言資料,進行模型訓練變成現在大家熟知的大型語言模型(LLM)。

這樣的大型語言模型,就改善了監督式學習雖然有品質,但是資料量過少又燒錢的問題,提供大量運算資料和數據。

AI 的應用限制:為什麼 LLM 不能個人化?

ChatGPT 並非 OpenAI 的第一個產品,該公司首個推出的應用是以 GPT-3 為基礎的語言繪圖模型 DALL·E 2,而後才推出具備語言理解和對話能力的 ChatGPT。

經過訓練後的 ChatGPT 有幾個應用,像是腦力激盪、協助創作、提供建議、摘要等功能,尤其是編碼和除錯領域,只要給予 ChatGPT 明確指令,如建立人設與拆解流程,就能完成工作很多工作。

然而,當前 GPT 的限制在於其很可能編造事實(預設為 2021 年 9 月以前的資料),以及最大的問題——沒有長期記憶

由於短期注意力不足,GPT 記不住使用者過去的提示內容,只能根據被訓練的內容回答,以致每次生成都是新的,無法量身打造專屬於個別用戶的回饋(但目前可用 Custom instructions 暫時解決人設問題)。

AI 的未來趨勢:我們該限制的,是什麼?

不只是單純文字,未來 AI 勢必還會朝向音樂和影片製作發展,而且比起維基百科,AI 更強調互動性。

Mohammad Bavarian 演講中談到,透過 AI 模型,很多醫療資源不足的國家能因此大幅降低醫療成本;再者,AI 還能抓出人類的判斷盲點。

過去 Twitter(現在已經改叫 X...)上有使用者分享 ChatGPT 救了他的愛犬一命,該使用者向 ChatGPT 提供了他狗狗生病的症狀和血液檢查數值,ChatGPT 隨後提出了一個原本被獸醫忽視的可能病因。該使用者後來根據 ChatGPT 的回答尋求了第二位獸醫的意見,結果證實 ChatGPT 的診斷是正確的。

AI 能夠完成許多任務,但最重要的,我們還是必須思考如何創造屬於人的價值,讓 GPT 成為 CTO 助人類 CEO 一臂之力。在技術的研發上,更是要讓 AI 能夠安全使用,以及對人類有益。

誠如 OpenAI 的 CEO Sam Altman 在 5 月的聽證會所強調,政府的監管干預是減少風險的關鍵。為了確保 AI 的安全與透明度並降低可能帶來的風險,其中必須建立的三條紅線有:

  • 建立新的政府部門,頒發大型 AI 模型的許可權,並有權撤銷不符合政府標準的公司或模型的許可證。
  • 建立 AI 模型的安全標準,評估其危險性。例如,這些模型必須通過一些安全測試,例如它們是否會「自我複製」或是「向外滲透」(不受人類控制,開始自己行動)
  • 要求專家對模型在各種指標上的表現進行獨立審核。

也就是說,我們要監管的,是 AI 的「潛在風險」,而非「技術發展」。

延伸閱讀:
監管和創新的雙面刃:AI 監管、邊緣運算和鴻海的紀律治理|資訊篇|前導|【怪獸】你與科技的距離 EP3.1

到底,該不該限制 AI 用在教育?

Mohammad Bavarian 的論點為,消極禁止無濟於事,AI 對教育會帶來重大改變,改變人類未來學習方式。未來 AI 會解決很多當前的系統限制,並且以通用人工智慧的樣態廣泛應用於生活各層面。

延伸閱讀:
【怪獸雙週快報#8】不要再焦慮了!2023 GAI年會+OTPR敏捷工作法、終結平庸,主動權還是在懂的人身上
raw-image

雖然 ChatGPT 無法回答所有用戶的提問,但它能幫助我們找尋答案。例如過去問它今日匯率,礙於資料訓練停留在 2021 年,ChatGPT 會要我們自己去查;但現在,它會幫忙搜索網頁整理答案,並提供資訊來源。

延伸閱讀:
【怪獸雙週快報#13】覺得自己不夠好?你可能有了成就,卻當掉了人生!馬斯克成立 xAI、踏實感的練習+做自己的生命設計師

至於 ChatGPT 對教育領域造成的衝擊,我們該以何種心態面對?

其實,不只有 ChatGPT,這是所有科技導入教育勢必會遇到的問題。在 AI 時代,資料取得與分析會更加容易,然而下一階段我們將面臨的,就是資訊辨識與正確性的挑戰。

Google 在生成圖片的做法是推出生成圖像功能,確保每一張 AI 生成的圖像在原始文件中都有一個標記,讓使用者在平台之外看到它時,可知道該圖片是 AI 標注的。身處現代的我們,更是要善用 AI,養成比對與檢測資訊正確性的能力。


raw-image

王政皓|怪獸科技公司主筆、vocus Premium 創作者

一個喜歡科技、熱愛閱讀的 ENTJ-A 政大生。曾為 TEDxNCCU 講者部、政大之聲主持人暨新聞部採訪組長,擁有台灣簡報認證(L level)及各式多角化實戰經驗,從 0 到 1 在一年內打造不重複下載數超過萬次的 Podcast、超過千人追蹤的 IG 社群、超過百人訂閱的怪獸雙週快報等怪獸科技公司旗下產品,亦獲 vocus 方格子、Apple Podcast、SoundOn 聲浪、Mixerbox 等平台推薦。

🤖 怪獸科技公司旗下五大版圖

最懂你的 #科技入門:一起培養在快速變化社會的超強適應力

🗣️ 節目|怪獸科技公司 Podcast(每週日晚上 9 點各大平台首播)

✍️ 專欄|怪獸科技公司 vocus Premium 沙龍
🎥 影音|怪獸科技公司 YouTube:來賓焦點訪談✖️重點短影音
🔥 社群|怪獸科技公司 IG:科技✖️時事✖️人生=怪獸科技公司
📰 電子報|怪獸雙週快報:1 則熱門時事分析✖️ 2 本人生思考書摘

avatar-img
22.3K會員
402內容數
你是否有想過,為什麼看過這麼多成功的人的例子,聽過這麼多厲害的人他們的分享,有時候自己卻好像只是在原地踏步呢?《怪獸科技公司》第二季將從科技產業的角度切入,透過跨領域的視野,帶你掌握各種必備的自我管理能力與心法,一起用科技去思考你的人生。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
怪獸科技公司第二季,一起培養在快速變化社會的超強適應力!專案管理(PM)不僅涉及技術和流程的掌握,更重要的是人際溝通能力。過去曾擔任 PM 的 Davina 將帶我們深入解析 AI 時代下,她自己是養成溝通能力的一些好用方法,以及持續創新、突破認知邊界的意義。
上一篇文章,我們從系統分析師的角度破解了有關信念,以及設定目標的盲點與迷思。但我們還有社群成癮、面對未知的恐懼等問題要克服,到底該怎麼辦?
正是因為處於 AI 的時代,back to basics,回歸思維原點這個最基本的步驟,目前還是必須要由人類來進行。這次怪獸科技公司邀請《用邏輯改變世界》的製作人 Davina Cymophane,用系統分析師拆解問題的角度,看待在變化快速世界的我們,可以怎麼樣透過批判性思考優化自己的人生!
本人從沒想過自己會寫專欄。而且還持續超過一年。身為獅子座無可避免地,就是有種成為世上無敵狠角色的想望,更是希望在這個步調飛快的社會快速成功。但就是追求快速,我們快到只是不斷追求下一個目標,不斷地放任自己加速趕上這個變化又更加快速的社會,從未好好靜下來,認真梳理自己的思考和感受。
在追求夢想的道路上難免會遇到失敗和挫折,又或是身心俱疲的時候。這樣的低潮期,是否會讓 Kelly 的信念產生動搖?她又是如何找回內在的平靜,從挫敗中學習與成長?
長期盯螢幕的人總有個困擾,就算平時有在吃葉黃素、魚油這類保健食品,依舊不敵眼睛疲勞和螢幕發出的藍光。該怎麼辦?這次開箱的 iPad 抗藍光簡單貼是創辦人 Bill 罹患青光眼、意識到眼睛保護重要性後研發的產品,就讓我們來看看簡單貼到底有什麼特點,可以得到台灣唯一的德國抗藍光認證!
怪獸科技公司第二季,一起培養在快速變化社會的超強適應力!專案管理(PM)不僅涉及技術和流程的掌握,更重要的是人際溝通能力。過去曾擔任 PM 的 Davina 將帶我們深入解析 AI 時代下,她自己是養成溝通能力的一些好用方法,以及持續創新、突破認知邊界的意義。
上一篇文章,我們從系統分析師的角度破解了有關信念,以及設定目標的盲點與迷思。但我們還有社群成癮、面對未知的恐懼等問題要克服,到底該怎麼辦?
正是因為處於 AI 的時代,back to basics,回歸思維原點這個最基本的步驟,目前還是必須要由人類來進行。這次怪獸科技公司邀請《用邏輯改變世界》的製作人 Davina Cymophane,用系統分析師拆解問題的角度,看待在變化快速世界的我們,可以怎麼樣透過批判性思考優化自己的人生!
本人從沒想過自己會寫專欄。而且還持續超過一年。身為獅子座無可避免地,就是有種成為世上無敵狠角色的想望,更是希望在這個步調飛快的社會快速成功。但就是追求快速,我們快到只是不斷追求下一個目標,不斷地放任自己加速趕上這個變化又更加快速的社會,從未好好靜下來,認真梳理自己的思考和感受。
在追求夢想的道路上難免會遇到失敗和挫折,又或是身心俱疲的時候。這樣的低潮期,是否會讓 Kelly 的信念產生動搖?她又是如何找回內在的平靜,從挫敗中學習與成長?
長期盯螢幕的人總有個困擾,就算平時有在吃葉黃素、魚油這類保健食品,依舊不敵眼睛疲勞和螢幕發出的藍光。該怎麼辦?這次開箱的 iPad 抗藍光簡單貼是創辦人 Bill 罹患青光眼、意識到眼睛保護重要性後研發的產品,就讓我們來看看簡單貼到底有什麼特點,可以得到台灣唯一的德國抗藍光認證!
你可能也想看
Google News 追蹤
Thumbnail
隨著理財資訊的普及,越來越多台灣人不再將資產侷限於台股,而是將視野拓展到國際市場。特別是美國市場,其豐富的理財選擇,讓不少人開始思考將資金配置於海外市場的可能性。 然而,要參與美國市場並不只是盲目跟隨標的這麼簡單,而是需要策略和方式,尤其對新手而言,除了選股以外還會遇到語言、開戶流程、Ap
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
均一AI實驗室研發了「AI狐貍貓」和「Jutor英語家教」等教育AI產品,並在暑假舉辦了AI研習課程,包括體驗Rai學習嚮導、製作小工具及客製化chatbot。課程中,老師們學習如何創建AI工具,並獲得了積極的回饋。這次活動展示了AI如何提升教學效果,並鼓勵教師們探索更創新的教學方法。
Thumbnail
AI的世界充滿了創新和潛力,涵蓋了許多領域,包括但不限於機器學習,自然語言處理、電腦視覺和機器人技術。AI對人類社會的影響是複雜而多層面的,既帶來了巨大的機遇,也提出了新的挑戰。社會需要在技術發展和倫理規範之間找到平衡,確保AI技術的應用能夠真正造福人類。
Thumbnail
在機器學習領域中,監督學習、無監督學習和強化學習是三種核心方法,它們在解決不同類型的問題時發揮著重要作用。
在人工智能的發展歷程中,早期的研究主要側重於將解決問題的規則輸入計算機,試圖通過啟蒙運動理性的思路模擬人類的智能行為。然而,這條路逐漸變得艱難,因為規則過於繁多,無法應對複雜的情境和語境。在這個背景下,一些科學家轉向了神經網絡算法,試圖模擬人腦的感知能力。
機器學習是什麼? 簡單來說,機器學習就是訓練機器尋找Function的一段過程,而這個Function可以幫助我們解決我們遇到的問題,或是幫助我們
大語言模型能夠生成文本,因此被認為是生成式人工智慧的一種形式。 人工智慧的學科任務,是製作機器,使其能執行需要人類智慧才能執行的任務,例如理解語言,便是模式,做出決策。 除了大語言模型,人工智慧也包含了深度學習以及機器學習。 機器學習的學科任務,是透過演算法來實踐AI。 特別
Thumbnail
ChatGPT 是 OpenAI 開發的大型語言模型,以其強大的生成能力和對話能力而聞名。 ChatGPT 的訓練過程主要分為兩個階段:預訓練和微調。 微調使用了 RLHF(Reinforcement Learning from Human Feedback)技術,可以有效地提高模型生成內容的質量。
Thumbnail
OpenAI成立於2015年,旨在以非盈利方式促進AI發展,並避免潛在危害。從GPT-1到GPT-4的發展過程展現了AI無監督學習及多任務學習的潛力。這篇文章回顧了OpenAI在自然語言處理方面的歷程與技術演進,並介紹了各個模型樣本和能力的提升。
Thumbnail
生成式 AI 讓人們驚艷,也開始認真思考:生成式 AI 會對教育培訓帶來什麼樣的衝擊?AI 會取代老師嗎?如何運用生成式 AI 來加速學習?企業如何運用生成式 AI 來加速創新? 但也開始懷疑 — 人類的工作是不是真的要被 AI 取代了?.....
近來AI繪圖以及如Chatgpt等可進行對話的AI進入到大眾視野,讓AI成為了熱門話題,網路媒體和論壇冒出許多相關的文章,足見AI之勢著實非同小可。
Thumbnail
隨著理財資訊的普及,越來越多台灣人不再將資產侷限於台股,而是將視野拓展到國際市場。特別是美國市場,其豐富的理財選擇,讓不少人開始思考將資金配置於海外市場的可能性。 然而,要參與美國市場並不只是盲目跟隨標的這麼簡單,而是需要策略和方式,尤其對新手而言,除了選股以外還會遇到語言、開戶流程、Ap
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
均一AI實驗室研發了「AI狐貍貓」和「Jutor英語家教」等教育AI產品,並在暑假舉辦了AI研習課程,包括體驗Rai學習嚮導、製作小工具及客製化chatbot。課程中,老師們學習如何創建AI工具,並獲得了積極的回饋。這次活動展示了AI如何提升教學效果,並鼓勵教師們探索更創新的教學方法。
Thumbnail
AI的世界充滿了創新和潛力,涵蓋了許多領域,包括但不限於機器學習,自然語言處理、電腦視覺和機器人技術。AI對人類社會的影響是複雜而多層面的,既帶來了巨大的機遇,也提出了新的挑戰。社會需要在技術發展和倫理規範之間找到平衡,確保AI技術的應用能夠真正造福人類。
Thumbnail
在機器學習領域中,監督學習、無監督學習和強化學習是三種核心方法,它們在解決不同類型的問題時發揮著重要作用。
在人工智能的發展歷程中,早期的研究主要側重於將解決問題的規則輸入計算機,試圖通過啟蒙運動理性的思路模擬人類的智能行為。然而,這條路逐漸變得艱難,因為規則過於繁多,無法應對複雜的情境和語境。在這個背景下,一些科學家轉向了神經網絡算法,試圖模擬人腦的感知能力。
機器學習是什麼? 簡單來說,機器學習就是訓練機器尋找Function的一段過程,而這個Function可以幫助我們解決我們遇到的問題,或是幫助我們
大語言模型能夠生成文本,因此被認為是生成式人工智慧的一種形式。 人工智慧的學科任務,是製作機器,使其能執行需要人類智慧才能執行的任務,例如理解語言,便是模式,做出決策。 除了大語言模型,人工智慧也包含了深度學習以及機器學習。 機器學習的學科任務,是透過演算法來實踐AI。 特別
Thumbnail
ChatGPT 是 OpenAI 開發的大型語言模型,以其強大的生成能力和對話能力而聞名。 ChatGPT 的訓練過程主要分為兩個階段:預訓練和微調。 微調使用了 RLHF(Reinforcement Learning from Human Feedback)技術,可以有效地提高模型生成內容的質量。
Thumbnail
OpenAI成立於2015年,旨在以非盈利方式促進AI發展,並避免潛在危害。從GPT-1到GPT-4的發展過程展現了AI無監督學習及多任務學習的潛力。這篇文章回顧了OpenAI在自然語言處理方面的歷程與技術演進,並介紹了各個模型樣本和能力的提升。
Thumbnail
生成式 AI 讓人們驚艷,也開始認真思考:生成式 AI 會對教育培訓帶來什麼樣的衝擊?AI 會取代老師嗎?如何運用生成式 AI 來加速學習?企業如何運用生成式 AI 來加速創新? 但也開始懷疑 — 人類的工作是不是真的要被 AI 取代了?.....
近來AI繪圖以及如Chatgpt等可進行對話的AI進入到大眾視野,讓AI成為了熱門話題,網路媒體和論壇冒出許多相關的文章,足見AI之勢著實非同小可。