庶民語言說OpenAI裡面 Temperature 跟 Top_p 參數(Parameters)的功用

iBonnie_愛邦尼-avatar-img
發佈於AI領域展開 個房間
更新於 發佈於 閱讀時間約 3 分鐘

「Temperature 」是文字建立過程中選擇接龍單字時控制"隨機性"的設定。較低的Temperature值使文字更加的可預測和擁有一致性;而較高的Temperature值可以讓自由度和創造力更高,使內容不太一致。

“Temperature”的範例

  • Temperature = 0:反應非常可預測,始終選擇下一個最可能的字。這對於事實和準確性非常重要的答案非常有用。
  • 例如:如果您問“鍛煉有什麼好處?”,Temperature為 0 時,模型可能會說:“鍛煉可以改善心臟健康和肌肉力量,降低患慢性病的機會,並有助於控制體重。”
  • Temperature = 1:模型會採取更多隨機性,去選擇原本不太可能出現的接龍單詞,這可能會產生更具創意(不可預測)的答案。
  • 例如:如果您問“鍛煉有什麼好處?”,Temperature為 1,您可能會得到:“運動是煉金術士,將汗水轉化為奇蹟療法,是在踏上奇蹟旅途的一場盛宴,你應該將它轉化為永生的魔咒。”


「Top_p」是決定要考慮多少可能單字的設定。高“top_p”值意味著模型會考慮更多可能的單詞,甚至是不太可能的單詞,這使得生成的文本更加多樣化。


“Top_p”的範例

  • Top_p = 0.5:這意味著僅考慮總機率至少為 50% 的詞彙,忽略不太可能的單字並保持一定程度不同反應的水準。
  • 例如您詢問一本冒險書的書名,top-p 為 0.5,模型可能會給出:「藍山之謎」。
  • Top_p = 0.9:這樣會在選擇中包含了更多的詞彙,允許更多的多樣性和原創性。對於相同的冒險書的書名,模型可能會創建:「來自深淵的聲音:勇敢者的肖像」。


混合「Temperature」和「Top_p」:會發生什麼事?

組合“Temperature”和“top_p”可以提供多種文字樣式。

較低的Temperature和較高的 top-p 可以產生具有創意的連貫文本: 由於Temperature低,答案通常邏輯一致,但由於高top-p,他們仍然可以擁有豐富的詞彙和想法。此設定適用於清晰度至關重要的教育或資訊性文本,但您也希望保持讀者的興趣。

另一方面,較高的Temperature和較低的 top-p 可能會將常用單字以不可預測的方式組合在一起: 這種相反的設定通常會導致文本中的句子本身可能有意義,但整體似乎不連貫或不太合乎邏輯。較高的Temperature允許句子結構有更多的變化,而較低的 top-p 將單字選擇限制為最可能的單字。如果您想得到意想不到的結果或透過不尋常的概念組合激發新想法的創意環境中非常有用。


法律文件或技術報告,「Temperature」越低越好。對於創意工作,例如小說寫作或廣告,在這兩種設定中使用更高的值可能是一個好主意。


這裡面可以結論告訴大家,實驗是關鍵,不管開發人員或使用者都經常會需要調整這些值,看看會發生什麼情況來找到最佳設定。理解和使用這些設定可以解鎖不同用途,從給出簡單、事實的答案到創建高度原創和引人入勝的內容。使用者應該將這些設定視為創意槓桿,如果使用得當,可以大大提高人工智慧生成內容的品質和相關性。


avatar-img
5會員
75內容數
記錄生活與技術的小細節
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
iBonnie_愛邦尼 的其他內容
語言模型與文字表示以不同的方式來分析自然語言的詞語分佈及語意關係。本文章簡要介紹了語言模型、Word2vec、FastText、GloVe和Transformer等技術,並提供了實際的應用參考點,幫助讀者深入理解自然語言處理的技術。
檢查torch版本 import torch torch.__version__ 檢查cuda可用性/版本 import torch torch.version.cuda #版本 torch.cuda.is_available() #有無 torch.cuda.device_count
建議安裝minianaconda或是anaconda後建立一個虛擬環境(如果你熟悉docker也很建議用docker來進行作業) 底下套件也都不是絕對必要,只是建議裝一裝。 pip install pandas pip install numpy pip install scikit-learn
本文將介紹如何安裝CUDA和cuDNN,並提供注意事項。隨著安裝步驟和提示,確保您能成功安裝這些必要的套件。
該文章介紹了浮點數精度的概念,包括雙精度、單精度、半精度、8位精度、4位精度、量化精度、多精度和混合精度。同時還介紹了nVidia A100開始的TF32精度和BF16格式,並提供了相關的數據對比。文章強調了TF32和BF16的潛在應用價值及特點。
搜尋.......支援的driver: apt search nvidia-drive 最新支援到545,我們來裝545好了(通常我會選擇前一版,我也建議選前一版,像是python12 我們就選python11) sudo apt install nvidia-driver-545 sudo
語言模型與文字表示以不同的方式來分析自然語言的詞語分佈及語意關係。本文章簡要介紹了語言模型、Word2vec、FastText、GloVe和Transformer等技術,並提供了實際的應用參考點,幫助讀者深入理解自然語言處理的技術。
檢查torch版本 import torch torch.__version__ 檢查cuda可用性/版本 import torch torch.version.cuda #版本 torch.cuda.is_available() #有無 torch.cuda.device_count
建議安裝minianaconda或是anaconda後建立一個虛擬環境(如果你熟悉docker也很建議用docker來進行作業) 底下套件也都不是絕對必要,只是建議裝一裝。 pip install pandas pip install numpy pip install scikit-learn
本文將介紹如何安裝CUDA和cuDNN,並提供注意事項。隨著安裝步驟和提示,確保您能成功安裝這些必要的套件。
該文章介紹了浮點數精度的概念,包括雙精度、單精度、半精度、8位精度、4位精度、量化精度、多精度和混合精度。同時還介紹了nVidia A100開始的TF32精度和BF16格式,並提供了相關的數據對比。文章強調了TF32和BF16的潛在應用價值及特點。
搜尋.......支援的driver: apt search nvidia-drive 最新支援到545,我們來裝545好了(通常我會選擇前一版,我也建議選前一版,像是python12 我們就選python11) sudo apt install nvidia-driver-545 sudo
你可能也想看
Google News 追蹤
Thumbnail
隨著理財資訊的普及,越來越多台灣人不再將資產侷限於台股,而是將視野拓展到國際市場。特別是美國市場,其豐富的理財選擇,讓不少人開始思考將資金配置於海外市場的可能性。 然而,要參與美國市場並不只是盲目跟隨標的這麼簡單,而是需要策略和方式,尤其對新手而言,除了選股以外還會遇到語言、開戶流程、Ap
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
今天節氣交小暑,代表著天氣非常炎熱的開始...
Thumbnail
這篇文章討論了自然語言處理技術的發展歷程,從語言模型的引入到深度學習的應用。作者觀察到現今GPT在產出中文國學內容時的深度不足,並提出了自然語言處理領域的倫理使用和版權問題,以及對大眾的影響。最後,作者探討了個人在自然語言領域的發展可能性。
Thumbnail
以下都是轉貼各方觀點,重點可以進一步看發表者跟回應者,我自己也有自身應用場景的murmur : 低利率環境可能回不去 科技掌握在大資金公司時代則是持續下去 工業時代引導一波人才需求 東方社會喜歡考試定生死 學校教育外還有補習班可以協助 既然AI工具隨處可得 培養厚植的各方素養與多元興趣
Thumbnail
邊塗鴉時思考的一些事情,僅限個人想法。 一直在思索是什麼讓文字與人變得平面、變得冰冷,又是什麼讓創作的意義變得單一而扭曲。最近在盯著「AI建議」這個按鈕看時稍微理出一些頭緒。 文章發布前頁面頂端有個「AI建議」的SEO優化按鈕,按下之後會出現AI自動生成的標題、分類、摘要等內容,我覺得很有趣。
Thumbnail
查看近日氣候 近日若計畫舉辦戶外活動,想要在你的電腦查詢近日氣候,事先掌握三天內的氣候,或想在你的手機上查看近日氣候。
Thumbnail
題目會給定一個輸入陣列temperatures ,分別代表每一天的溫度。 請計算每一天還要再過幾天才會遇到更溫暖的日子,如果遇不到,則回填0。 請以陣列的形式返回答案。 題目的原文敘述 約束條件 Constraints: 1 <= temperatures.length <= 10^
Thumbnail
色溫,顏色和溫度之間的關係很複雜。本文介紹了攝氏溫度和開式溫度的區別,顏色與物質溫度的關係,以及色溫表的讀法,並解釋了冷暖色調和物理溫度之間的矛盾。
Thumbnail
隨著理財資訊的普及,越來越多台灣人不再將資產侷限於台股,而是將視野拓展到國際市場。特別是美國市場,其豐富的理財選擇,讓不少人開始思考將資金配置於海外市場的可能性。 然而,要參與美國市場並不只是盲目跟隨標的這麼簡單,而是需要策略和方式,尤其對新手而言,除了選股以外還會遇到語言、開戶流程、Ap
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
今天節氣交小暑,代表著天氣非常炎熱的開始...
Thumbnail
這篇文章討論了自然語言處理技術的發展歷程,從語言模型的引入到深度學習的應用。作者觀察到現今GPT在產出中文國學內容時的深度不足,並提出了自然語言處理領域的倫理使用和版權問題,以及對大眾的影響。最後,作者探討了個人在自然語言領域的發展可能性。
Thumbnail
以下都是轉貼各方觀點,重點可以進一步看發表者跟回應者,我自己也有自身應用場景的murmur : 低利率環境可能回不去 科技掌握在大資金公司時代則是持續下去 工業時代引導一波人才需求 東方社會喜歡考試定生死 學校教育外還有補習班可以協助 既然AI工具隨處可得 培養厚植的各方素養與多元興趣
Thumbnail
邊塗鴉時思考的一些事情,僅限個人想法。 一直在思索是什麼讓文字與人變得平面、變得冰冷,又是什麼讓創作的意義變得單一而扭曲。最近在盯著「AI建議」這個按鈕看時稍微理出一些頭緒。 文章發布前頁面頂端有個「AI建議」的SEO優化按鈕,按下之後會出現AI自動生成的標題、分類、摘要等內容,我覺得很有趣。
Thumbnail
查看近日氣候 近日若計畫舉辦戶外活動,想要在你的電腦查詢近日氣候,事先掌握三天內的氣候,或想在你的手機上查看近日氣候。
Thumbnail
題目會給定一個輸入陣列temperatures ,分別代表每一天的溫度。 請計算每一天還要再過幾天才會遇到更溫暖的日子,如果遇不到,則回填0。 請以陣列的形式返回答案。 題目的原文敘述 約束條件 Constraints: 1 <= temperatures.length <= 10^
Thumbnail
色溫,顏色和溫度之間的關係很複雜。本文介紹了攝氏溫度和開式溫度的區別,顏色與物質溫度的關係,以及色溫表的讀法,並解釋了冷暖色調和物理溫度之間的矛盾。