大型多模態模型(LMMs)於醫療領域之應用與風險

更新於 2024/12/06閱讀時間約 4 分鐘

一、前言

大型多模態模型(LMMs)作為生成式人工智慧的前沿技術,具備處理語音、文本、圖像等數據的能力,應用於健康醫療領域,包括基因數據與臨床數據的整合,促進疾病診斷精準化、患者健康管理個人化及新藥研發加速,展現超越傳統人工智慧模型的成長潛力與創新能力。然而,LMMs 的發展同時帶來倫理與治理挑戰。2024 年,世界衛生組織(WHO)發布《Ethics and Governance of Artificial Intelligence for Health: Guidance on Large Multi-Modal Models》報告,旨在透過政策建議促進 LMMs 的合理開發與應用,最大化健康效益並降低風險。

二、LMMs 於醫療領域的應用與挑戰

(1) 疾病診斷與臨床照護

LMMs 能迅速整合患者病歷與網路資訊,為醫師提供診斷建議,特別在處理複雜病例與罕見疾病診斷時發揮作用,同時回覆患者訊息減少醫務負擔。然而,LMMs 可能因訓練數據品質參差,產生偏見或錯誤建議,需透過更多研究與驗證以提升其可靠性。

(2) 以患者為中心之應用

LMMs 協助健康監測、自我診斷及症狀分類,並為患者提供健康建議及心理支持,有助行為調整及臨床試驗參與。但生成錯誤或不完整資訊的風險,以及患者可能過度依賴模型導致判斷力下降,皆需警惕。

(3) 文書與行政任務

LMMs 可減輕醫護人員的文書負擔,如填寫病歷、生成報告等,提升流程效率並減少倦怠。但由於模型可能產生不準確資訊,仍需醫療人員進行監督和校正。

(4) 醫學教育

LMMs 模擬臨床場景,提供個人化教學,加強學生診斷推理與溝通技能。但過度依賴 AI 可能削弱醫護人員的專業判斷能力,並為數位素養不足者帶來額外負擔。

(5) 科學研究與藥物開發

LMMs 加速研究數據分析與藥物篩選,優化研發流程並提升臨床試驗效率。然而,由於訓練數據偏向高收入國家背景,可能加劇全球健康不平等,並缺乏對生成內容的責任性。


三、風險與倫理挑戰

(1) 高估效益

對 LMMs 的高度期待可能導致過度推廣尚未驗證的技術,增加醫療系統風險與財務壓力,影響資源配置的效率。

(2) 可及性限制

LMMs 開發與運營成本高昂,限制其在低收入地區的普及。多語言環境中的應用挑戰也使非英語使用者受限。

(3) 系統性偏見

數據中缺乏弱勢群體資訊可能導致模型診斷偏誤,進一步影響醫療資源分配公平性。

(4) 勞動市場衝擊

LMMs 將影響工作機會,要求醫護人員適應新技術,但在資源不足地區亦能彌補人力缺口,提升醫療服務覆蓋率。

(5) 過度依賴

倘若過度依賴 LMMs,醫療專業能力將逐漸退化,且若缺乏維護與更新,可能影響系統穩定性與隱私保護。

(6) 網絡安全

LMMs 易成為駭客目標,透過篡改數據或攻擊模型生成敏感內容,需加強防護措施以降低風險。

(7) 資源消耗與信任衝擊

LMMs 訓練需耗費大量能源與數據,可能加劇環境負擔。此外,模型生成的資訊若被誤用,將削弱對專業知識的信任,並污染訓練數據,進一步影響模型品質。

總結

LMMs 在醫療領域展現成長潛力,但其應用需要平衡技術進步與倫理治理,確保其以負責任的方式為全人類健康服務。

raw-image

圖一、LMMs在醫療領域應用之風險與挑戰


資料來源

OUTLOOK 科技發展觀測平台

探索生醫與半導體領域的最新進展以及個人對信仰的感觸
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
本文分析全球半導體供應鏈的地理集中化問題,特別聚焦於美國、歐洲、臺灣等國策略與發展趨勢。隨著地緣政治、疫情及其他區域危機的影響,各國政府紛紛推行政策以增強供應鏈韌性。文章探討IC設計、晶片製造、半導體設備與材料供應鏈的挑戰,並強調新興市場的重要性及人才培養的緊迫性,以保障未來半導體產業的穩定與創新。
合成生物學是一門以工程學原理設計和改造生物系統的跨學科技術。隨著各國投入資源推動該領域,合成生物學在醫藥應用中展現出無限潛力。關鍵技術如CRISPR基因編輯、基因電路、框架基底生物體等為疾病治療和新藥開發提供了新思路。本文探討了合成生物學的主要技術和創新案例,並展望其未來在改善醫療系統中的角色。
隨著人們對健康的重視日益增加,運動參與率逐年攀升,運動醫療需求也快速增長。美國每年有360萬名兒童因運動受傷,顯示運動傷害對醫療需求的重要性。運動醫療產品從義肢到植入物不斷創新,且新技術如3D列印和智慧手術的發展,讓運動醫療面貌煥然一新。本文探討運動醫療市場的現狀及創新,並展望未來市場的成長潛力。
生成式人工智慧(Generative AI, GenAI)專利申請在過去幾年顯著增長,主要技術如生成對抗網絡(GAN)、大型語言模型(LLM)和擴散模型(Diffusion Models)在全球多個應用領域中快速擴展。報告分析了各種模型的專利趨勢、不同模態的應用發展,以及全球主要技術領先者的布局。
Frost & Sullivan在研究市場趨勢、專利、投資等要素後,指出未來2-4年內有潛力對社會產生重大影響的人工智慧新興技術,包括多模態神經網路、可解釋人工智慧(XAI)及自主邊緣技術。本文分別針對這三種技術的定義、應用範疇、發展趨勢和代表性案例進行分析。
本文分析全球半導體供應鏈的地理集中化問題,特別聚焦於美國、歐洲、臺灣等國策略與發展趨勢。隨著地緣政治、疫情及其他區域危機的影響,各國政府紛紛推行政策以增強供應鏈韌性。文章探討IC設計、晶片製造、半導體設備與材料供應鏈的挑戰,並強調新興市場的重要性及人才培養的緊迫性,以保障未來半導體產業的穩定與創新。
合成生物學是一門以工程學原理設計和改造生物系統的跨學科技術。隨著各國投入資源推動該領域,合成生物學在醫藥應用中展現出無限潛力。關鍵技術如CRISPR基因編輯、基因電路、框架基底生物體等為疾病治療和新藥開發提供了新思路。本文探討了合成生物學的主要技術和創新案例,並展望其未來在改善醫療系統中的角色。
隨著人們對健康的重視日益增加,運動參與率逐年攀升,運動醫療需求也快速增長。美國每年有360萬名兒童因運動受傷,顯示運動傷害對醫療需求的重要性。運動醫療產品從義肢到植入物不斷創新,且新技術如3D列印和智慧手術的發展,讓運動醫療面貌煥然一新。本文探討運動醫療市場的現狀及創新,並展望未來市場的成長潛力。
生成式人工智慧(Generative AI, GenAI)專利申請在過去幾年顯著增長,主要技術如生成對抗網絡(GAN)、大型語言模型(LLM)和擴散模型(Diffusion Models)在全球多個應用領域中快速擴展。報告分析了各種模型的專利趨勢、不同模態的應用發展,以及全球主要技術領先者的布局。
Frost & Sullivan在研究市場趨勢、專利、投資等要素後,指出未來2-4年內有潛力對社會產生重大影響的人工智慧新興技術,包括多模態神經網路、可解釋人工智慧(XAI)及自主邊緣技術。本文分別針對這三種技術的定義、應用範疇、發展趨勢和代表性案例進行分析。
你可能也想看
Google News 追蹤
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。 在某些情況下,別人提供的 Pretrained Transformer Model 效果不盡人意,可能會想要自己做 Pretrained Model,但是這會耗費大量運
Thumbnail
本系列將討論 LLM 時代中,分散 ML workload 的各種方法。作為系列的第一篇,我們將提及 High-level 的概論,譬如分散式訓練的各種切法、Model Parallelism 的相依問題,以及改善 Network Topology 等課題。
Thumbnail
我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。 從 AI說書 - 從0開始 - 82 到 AI說書 - 從0開始 - 85 的說明,有一個很重要的結論:最適合您的模型不一定是排行榜上最好的模型,您需要學習 NLP 評
今天聊聊由 Vadim Borisov[1]於2023年發表的文章, 《Language Models are Realistic Tabular Data Generators》[2]。 這篇文章的看點,是提出了GReaT 框架,實現使用「大語言模型 Large Language Mo
我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。 我們在AI說書 - 從0開始 - 28中闡述了一些AI專業者的未來發展方向,現在我們更細分: 人工智慧專家在人工智慧某一領域擁有專業知識或技能,包含微調模型、維護和支
我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。 Transformer模型驅動的人工智慧正在將無所不在的一切連接起來,機器直接與其他機器通訊,人工智慧驅動的物聯網訊號無需人工干預即可觸發自動決策。 自然語言處理演算法
Thumbnail
我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。 我們已經在AI說書 - 從0開始 - 17中,介紹了大型語言模型 (LLM)世界裡面常用到的Token,現在我們來談談OpenAI的GPT模型如何利用Inference
Thumbnail
在AI時代中,GPT技術正在改變我們的生活。然而,SLM(小型語言模型)也開始受到關注,具有更高的效率、更低的資源消耗和更快的響應速度。這篇文章將討論LLM和SLM的比較、SLM的應用場景以及未來的發展趨勢。
Thumbnail
大語言模型(LLMs)對於任何對人工智能和自然語言處理感興趣的人來說都是一個令人興奮的領域。 這類模型,如GPT-4, 透過其龐大的數據集和複雜的參數設置, 提供了前所未有的語言理解和生成能力。 那麼,究竟是什麼讓這些模型「大」得如此不同呢?
Thumbnail
對於熱衷於語言科技的你, 大語言模型(LLMs)在自然語言處理(NLP)領域的發展無疑是一個革命性的進展。 從傳統的規則系統到基於深度學習的方法, LLMs展現了在理解、生成和翻譯人類語言方面的巨大突破。 這不僅是技術上的飛躍, 更是開啟了新的應用和可能性。 下面將介紹這一變革帶來的三大
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。 在某些情況下,別人提供的 Pretrained Transformer Model 效果不盡人意,可能會想要自己做 Pretrained Model,但是這會耗費大量運
Thumbnail
本系列將討論 LLM 時代中,分散 ML workload 的各種方法。作為系列的第一篇,我們將提及 High-level 的概論,譬如分散式訓練的各種切法、Model Parallelism 的相依問題,以及改善 Network Topology 等課題。
Thumbnail
我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。 從 AI說書 - 從0開始 - 82 到 AI說書 - 從0開始 - 85 的說明,有一個很重要的結論:最適合您的模型不一定是排行榜上最好的模型,您需要學習 NLP 評
今天聊聊由 Vadim Borisov[1]於2023年發表的文章, 《Language Models are Realistic Tabular Data Generators》[2]。 這篇文章的看點,是提出了GReaT 框架,實現使用「大語言模型 Large Language Mo
我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。 我們在AI說書 - 從0開始 - 28中闡述了一些AI專業者的未來發展方向,現在我們更細分: 人工智慧專家在人工智慧某一領域擁有專業知識或技能,包含微調模型、維護和支
我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。 Transformer模型驅動的人工智慧正在將無所不在的一切連接起來,機器直接與其他機器通訊,人工智慧驅動的物聯網訊號無需人工干預即可觸發自動決策。 自然語言處理演算法
Thumbnail
我想要一天分享一點「LLM從底層堆疊的技術」,並且每篇文章長度控制在三分鐘以內,讓大家不會壓力太大,但是又能夠每天成長一點。 我們已經在AI說書 - 從0開始 - 17中,介紹了大型語言模型 (LLM)世界裡面常用到的Token,現在我們來談談OpenAI的GPT模型如何利用Inference
Thumbnail
在AI時代中,GPT技術正在改變我們的生活。然而,SLM(小型語言模型)也開始受到關注,具有更高的效率、更低的資源消耗和更快的響應速度。這篇文章將討論LLM和SLM的比較、SLM的應用場景以及未來的發展趨勢。
Thumbnail
大語言模型(LLMs)對於任何對人工智能和自然語言處理感興趣的人來說都是一個令人興奮的領域。 這類模型,如GPT-4, 透過其龐大的數據集和複雜的參數設置, 提供了前所未有的語言理解和生成能力。 那麼,究竟是什麼讓這些模型「大」得如此不同呢?
Thumbnail
對於熱衷於語言科技的你, 大語言模型(LLMs)在自然語言處理(NLP)領域的發展無疑是一個革命性的進展。 從傳統的規則系統到基於深度學習的方法, LLMs展現了在理解、生成和翻譯人類語言方面的巨大突破。 這不僅是技術上的飛躍, 更是開啟了新的應用和可能性。 下面將介紹這一變革帶來的三大