Darren
16 位追蹤者
資料科學家，專攻機器學習與金融商品價格預測，英國學術機構 CORMSIS (作業研究與管理科學中心) & 運籌學會 (Operational Research Society) 的成員。以前是幾個自媒體的專欄作家，文章曾見於關鍵評論網、口袋財經、科技報橘等。喜歡寫一些技術、科技、人文社會的觀察。
14會員
14內容數
大數據意味著什麼？數據科學背後有怎樣的mind set和技術？數據科學家又做些什麼？這些科技/技術，帶給我們什麼生活上和人文上的省思？這個專題會橫跨這些彼此相關的面向，避開生澀的專業詞彙，探索這些事情背後的樣貌。應該會是有趣的知識和想法分享﹝笑﹞
全部內容
由新到舊
我向來喜歡讀歷史，因為可以了解現在之所以會成為現在，也可以在將來之事找到事發的線索。新國富論書名致敬亞當斯密的鉅作國富論。這本書按著世界史時間序以史料推進敘述主軸，讓豐富的史料之間有對話。語言精準帶有美感。著於1997年，但有些預言像中國撕碎與香港的關係，也極其精準。其對人性墮落的省思，至今仍在
文章主攻四大領域：機率與統計、計量經濟和量化金融分析。以機率統計為核心主幹，詳加說明其精神與應用。也會輔以其餘三個領域的介紹作為統計實例。統計學是AI / 機器學習背後的英雄，假設檢定與統計分布是其兩大特色，前者找出彼此相互關聯的變數；後者則幫助我們進行模擬和抽樣，幫助我們找尋最優解或近似真實值。
本文要探討AI的任務與實戰場景。AI技術已深入生活各層面，從違約預測到都市交通管理。AI任務主要有三類：數值型資料處理、自然語言處理（NLP）和電腦影像辨識。時間序列資料和強化學習方法（如AlphaGo）也引起廣泛關注。AI演算法和方法因應不同學派和技術發展而多樣化，了解這些基礎有助選擇適合研究方向
本文談及資料科學的領域與分工。首先是建造一個AI的研發流程，資料收集到 AI 模型訓練的過程，AI經歷這一切流程被創造出來並產生價值；再來本文也提及在這個領域中的各種腳色、資料工程師、數據庫工程師、資料科學家和資料分析師的各種介紹。並且強調跨領域合作的重要性。
魔球記載MLB奧克蘭運動家隊的真實故事。該隊以小搏大，用數據思維選出一批從未被看好的球員，打出最瘋狂的佳績。
這本是經典老書了，書中細節大家已多有討論，我只著重在「統計數據」與「新舊觀念衝突」兩部分。透過魔球的精神，反思今天科技時代下「人」或「人才」的價值，我也會表達我對一個大趨勢形成的看法。
消失了大半年，實在忙碌，回過神來，竟然已經要做年度回顧了......。2023是瘋狂的一年，大忙碌也算有豐收吧。
年初給自己想法是：「寬築城牆，廣積糧草」。其實是擴展自己業內工作的技能，業外增加與人互動的經驗（畢竟不能都一直只寫程式吧）。總之是蠻多事情，可以用數字概括一下......
正文1,724字，主要跟你分享未來 AI 變更強更效率的兩個層面──數據與模型框架。你會從實務者的觀點，知道數據跟 AI (或機器學習模型) 表現間的關係；了解 ChatGPT 為什麼有運算資源的困擾；同時，你也會看到目前最新改善 AI 運算速度的技術發表。
AI 真的是探討不完的議題...
去年錄製好的線上課程，今年終於上架了！
非常慚愧，在方格子平台還沒寫幾篇內容，就要先宣傳自己的課程。不過現在67折優惠，宣傳還是有必要的吧，哈！我就維持喜寫論述的習性，介紹一下這門課程，以及我在這個領域──金融商品價格預測──所看見的狀況。
好奇的可以當補充課外知識，有興趣的可以看文末的課程連結。
本文回答幾個問題：(一) 什麼叫做湧現；(二)湧現是什麼現象；(三)為什麼我們造不出自己的超級 AI。看完後，你會理解現在 AI 的現象跟趨勢、一些技術與專有名詞，像是參數、大型機構與他們模型的名字。
這篇來寫，嘗試用GPT4解決工作中，一個讓我渾身難受的問題。
任務說明
我要做的事情是，把word檔中表格的部分資訊擷取出來。下圖的示範表格即是一例。
我需要存取表格中特定元素資訊，例如 Net Calorific Value，我得存下Min. 4,750這個訊息，同理可知，Total Sulfur
