saddle point 鞍點
圖中函數為 z=x^2-y^2
既不是局部極小值，也不是局部極大值在鞍點，梯度向量的大小趨近於零，導致參數更新的幅度變得極小，算法可能「卡住」以下有幾種方法可改進
1.使用 隨機梯度下降（SGD）
2.引入「動量」Momentum 概念，例如adam
3.Hessian 矩陣判斷臨界點
4.動態調整學習率
留言
留言分享你的想法！
Princend的沙龍
0會員
34內容數
Princend的沙龍的其他內容
2025/01/26
這本書旨在幫助創作者分享他們的過程並與受眾建立聯繫，而非僅僅是推銷自己。
## 第一章：你不需要是個天才
* **創造力不只是天賦，而是一種運作方式** 。
* 不要相信「孤獨的天才」神話，偉大的作品往往來自於一個互相支持、彼此學習的「群體」（**scenius**）
2025/01/26
這本書旨在幫助創作者分享他們的過程並與受眾建立聯繫，而非僅僅是推銷自己。
## 第一章：你不需要是個天才
* **創造力不只是天賦，而是一種運作方式** 。
* 不要相信「孤獨的天才」神話，偉大的作品往往來自於一個互相支持、彼此學習的「群體」（**scenius**）
2024/12/31
今年嘗試往不同領域去學習
甚至裸辭參加AI職訓班
雖然成長的幅度沒有想像的那麼好
但是至少是有成長的
期待未來的我
能夠持續學習
達到心中所想的目標
2024/12/31
今年嘗試往不同領域去學習
甚至裸辭參加AI職訓班
雖然成長的幅度沒有想像的那麼好
但是至少是有成長的
期待未來的我
能夠持續學習
達到心中所想的目標
2024/12/25
馬可夫鍊（Markov Chain） 是一種數學模型，用來描述一個系統在不同狀態之間的轉移過程，特點是未來的狀態只取決於當前狀態，而與過去的狀態無關。這種性質稱為馬可夫性質，即「無記憶性」。馬可夫鍊常用於統計學、機器學習、經濟學、生物學等領域。
2024/12/25
馬可夫鍊（Markov Chain） 是一種數學模型，用來描述一個系統在不同狀態之間的轉移過程，特點是未來的狀態只取決於當前狀態，而與過去的狀態無關。這種性質稱為馬可夫性質，即「無記憶性」。馬可夫鍊常用於統計學、機器學習、經濟學、生物學等領域。
你可能也想看
創作者營運專員/經理（Operations Specialist/Manager）將負責對平台成長及收入至關重要的 Partnership 夥伴創作者開發及營運。你將發揮對知識與內容變現、影響力變現的精準判斷力，找到你心中的潛力新星或有聲量的中大型創作者加入 vocus。
創作者營運專員/經理（Operations Specialist/Manager）將負責對平台成長及收入至關重要的 Partnership 夥伴創作者開發及營運。你將發揮對知識與內容變現、影響力變現的精準判斷力，找到你心中的潛力新星或有聲量的中大型創作者加入 vocus。
1.0 從函數到函算語法
1.2 函數概念小史
1.2.1 中譯的來源
1.2.2 一個速度問題
1.2.3 幾何的方法
1.2.4 微積分的記法
1.2.5 弦的振動
1.2.6 熱的傳導
1.2.7 十九世紀的尾聲
一
函數概念的發展不可能終結，踏入公元廿一世紀，數學
1.0 從函數到函算語法
1.2 函數概念小史
1.2.1 中譯的來源
1.2.2 一個速度問題
1.2.3 幾何的方法
1.2.4 微積分的記法
1.2.5 弦的振動
1.2.6 熱的傳導
1.2.7 十九世紀的尾聲
一
函數概念的發展不可能終結，踏入公元廿一世紀，數學
這一節談的是向量的定義，以及如何運用向量來建立模擬物體運動時，關於位置和速度間的關係式。
這一節談的是向量的定義，以及如何運用向量來建立模擬物體運動時，關於位置和速度間的關係式。
1.0 從函數到函算語法
1.2 函數概念小史
1.2.1 中譯的來源
1.2.2 一個速度問題
1.2.3 幾何的方法
1.2.4 微積分的記法
1.2.5弦的振動
八
在關於振動弦通解的這場論爭之中，函數概念默默地向兩個方面推前了一大步。
一方面，特朗貝爾和歐拉等擴大了
1.0 從函數到函算語法
1.2 函數概念小史
1.2.1 中譯的來源
1.2.2 一個速度問題
1.2.3 幾何的方法
1.2.4 微積分的記法
1.2.5弦的振動
八
在關於振動弦通解的這場論爭之中，函數概念默默地向兩個方面推前了一大步。
一方面，特朗貝爾和歐拉等擴大了
1.0 從函數到函算語法
1.2 函數概念小史
1.2.1 中譯的來源
1.2.2 一個速度問題
1.2.3 幾何的方法
1.2.4 微積分的記法
1.2.5弦的振動
七
雖然論爭沒有得出任何定論，但對函數概念的演化卻影嚮頗深。
在這次歷時多年的論爭中，函數概念得以擴大而包括
1.0 從函數到函算語法
1.2 函數概念小史
1.2.1 中譯的來源
1.2.2 一個速度問題
1.2.3 幾何的方法
1.2.4 微積分的記法
1.2.5弦的振動
七
雖然論爭沒有得出任何定論，但對函數概念的演化卻影嚮頗深。
在這次歷時多年的論爭中，函數概念得以擴大而包括
1.0 從函數到函算語法
1.2 函數概念小史
1.2.1 中譯的來源
1.2.2 一個速度問題
1.2.3 幾何的方法
1.2.4 微積分的記法
1.2.5 弦的振動
五
特朗貝爾依循當時數學界對函數的普遍理解，視「函數」為任一分析式。
但這時的歐拉宣稱函數不必是正常意義下的
1.0 從函數到函算語法
1.2 函數概念小史
1.2.1 中譯的來源
1.2.2 一個速度問題
1.2.3 幾何的方法
1.2.4 微積分的記法
1.2.5 弦的振動
五
特朗貝爾依循當時數學界對函數的普遍理解，視「函數」為任一分析式。
但這時的歐拉宣稱函數不必是正常意義下的