自然語言處理
#
自然語言處理
含有「自然語言處理」共 20 篇內容
全部內容
發佈日期由新至舊
使用Meta釋出的模型,實作Chat GPT - Part 5
延續使用Meta釋出的模型,實作Chat GPT - Part 4,我們現在遇到一個問題:語言模型回答的資訊不是我想要的。 於是我參照ChatGPT回答不是你要的怎麼辦?,想使用低成本的技術:RAG,來改善這問題。 以下開始實作,首先引入一個重量級工具包,它叫做LangChain,這是做語言模型
2024-05-01
1
#
自然語言處理
#
自然語言處理技術
#
NLP
使用Meta釋出的模型,實作Chat GPT - Part 4
在使用Meta釋出的模型,實作Chat GPT - Part 3中我們已經建立好大型語言模型遇到哪些「字串」要停止輸出的列表,現在我們將它製作成一個物件,對應程式如下: from transformers import StoppingCriteria, StoppingCriteriaList
2024-04-30
2
#
自然語言處理
#
NLP
#
Huggingface
使用Meta釋出的模型,實作Chat GPT - Part 3
延續使用Meta釋出的模型,實作Chat GPT - Part 2 我們已經確定可以進入HuggingFace之後,就要來載入模型,其對應程式為: Model_Config = transformers.AutoConfig.from_pretrained( Mode
2024-04-29
3
#
自然語言處理
#
NLP
#
Huggingface
ChatGPT回答不是你要的怎麼辦?
背景 各位ChatGPT使用者是否常常發生以下狀況:ChatGPT跟你雞同鴨講。 原因就出在ChatGPT當初在訓練時,在你所處的專業Domain並沒有足夠的訓練資料。 針對這種情況要怎麼辦呢? 今天將介紹幾種分法來解決,並分析各種方法的優劣。 方法羅列 提示工程 (Prompt E
2024-04-28
4
#
自然語言處理
#
NLP
#
Huggingface
使用Meta釋出的模型,實作Chat GPT - Part 2
接著載入Part 2需要的相關依賴,其分別為: from torch import cuda, bfloat16import import transformers 然後選擇我們要的Meta模型,這邊可以是Llama 2或者是Llama 3,後者是Meta最新釋出的模型。 同時我們也讓系統自
2024-04-28
2
#
自然語言處理
#
NLP
#
Huggingface
使用Meta釋出的模型,實作Chat GPT - Part 1
第一步先在Python環境中安裝本次專案需要用到的Library,相關指令如下: !pip install accelerate==0.21.0 !pip install transformers==4.31.0 !pip install tokenizers==0.13.3 !pip insta
2024-04-27
2
#
自然語言處理
#
NLP
#
HuggingFace
AI時代來臨,理工科反而不再吃香? 文科生將迎來翻轉性的勝利!
AI工具導入會是第四次工業革命的開始,對日後的工作機會和型態產生根本性的變化,本文分成3大部分各別討論: (1)文科生將再次迎來出頭天;(2)理工科學生工作機會將大幅減少;(3)一人公司數量將爆發性成長。
2024-04-25
2
#
AI
#
理工科系
#
語言學
圖靈測試是什麼?人工智能的終極考驗?
圖靈測試是用於衡量機器是否能夠表現出與人類相等的智能的方法。本文介紹了圖靈測試的歷史、原理和評價,並探討了ChatGPT是否能通過該測試的問題
2024-02-23
2
#
人類
#
ChatGPT
#
人工智慧
【使用大語言模型學習語言:26-28歲的三大啟示】
如果你曾經嘗試學習多種語言, 你會發現每種語言都有其獨特之處。 在我26至28歲期間, 我系統地學習了語言學知識, 以此來輔助我學習俄語、法語、德語、義大利語和西班牙語。 這個過程中, 我發現了大語言模型(LLMs)在語言學習上的巨大潛力。
2024-01-17
11
#
大語言模型
#
機器學習
#
自然語言處理
【從規則到革新:3大進步展示了大語言模型在自然語言處理上的威力】
對於熱衷於語言科技的你, 大語言模型(LLMs)在自然語言處理(NLP)領域的發展無疑是一個革命性的進展。 從傳統的規則系統到基於深度學習的方法, LLMs展現了在理解、生成和翻譯人類語言方面的巨大突破。 這不僅是技術上的飛躍, 更是開啟了新的應用和可能性。 下面將介紹這一變革帶來的三大
2024-01-15
10
#
大語言模型
#
ChatGPT
#
深度學習