【人工智慧與數據分析】大數據如何創造智慧?

更新於 發佈於 閱讀時間約 2 分鐘
大數據是甚麼?如何定義大數據?

大數據與人工智慧幾乎是一同線性發展的,AI的成長幾乎是由大數據構建而成。

一、大數據的定義

  1. 容量(Volume)

資料量達到我們對於運算它有一定的困難,目前大概是10 Tera或是100 Tera。

  1. 速度(Velocity)

速度指的是資料變化的速度很快,我們無法只用原本的一群資料就永遠的使用下去。需要收集新的資料再次運算。

  1. 多樣性(Variety)

收集到的資料有可能是圖片、影音或各種檔案。所以我們需要對資料進行前處理,才能進行大數據運算。

要做機器學習,首先需要有足夠多資料以及定義好的演算法,交由機器學習的模組,經過運算,得到一個智能模型,具體的算法就是填入正確的參數,得到公式,進行精確的預測或推理。而精確度最主要來自於大數據。

二、創造人工智慧的流程

  1. 演算法(Algorithm)與大數據(Sample Data)

首先需要有專家定義的演算法與足夠多的資料。

  1. 機器學習(Learning)

利用機器學習找到最佳化的參數(Find the optimized parameter)。

  1. 建立模型(Build Model)

建立智能化的模型,包含特定領域的知識,可以用來判斷輸入資料與事件之間的關係。

  1. AI代理人(AI agent)

將模型包裝成一個可以被呼叫的程式。

5.推理(Inference)

藉由呼叫程式進行實際上AI的運算,來判斷現實中的資料所產生的規則。


我們不可能一直使用同一種資料、同一種模型來預測實際狀況,所以我們會對模型增量,模型是一個可擴充的彈性模型,基本上是AI模型的一個原則。

留言
avatar-img
留言分享你的想法!
avatar-img
Jim的沙龍
1會員
31內容數
Jim的沙龍的其他內容
2025/08/05
所謂的機器學習是如何做到自我學習? 機器學習裡有一種最基本的演算法叫做回歸(Regression)。我們可以使用回歸分析法找出變數之間的關聯,進而推測未知的資料。 假如我們有一群台灣黑熊身高體重的資料,並且假設台灣黑熊身高是X,體重是Y。當出現新的台灣黑熊,而我們只知道它的身高時,我們要如何推測
2025/08/05
所謂的機器學習是如何做到自我學習? 機器學習裡有一種最基本的演算法叫做回歸(Regression)。我們可以使用回歸分析法找出變數之間的關聯,進而推測未知的資料。 假如我們有一群台灣黑熊身高體重的資料,並且假設台灣黑熊身高是X,體重是Y。當出現新的台灣黑熊,而我們只知道它的身高時,我們要如何推測
2025/08/05
在人工智慧當紅的這時代,所謂機器學習與深度學習是什麼呢? 一、人工智慧(Artificial Intelligence)' 泛指所有人工智慧的領域,包括自動控制、自動駕駛的車子、工廠的機械手臂或是機器人都屬於AI領域。 二、機器學習(Machine Learning) 在人工智慧的範圍裡面有
2025/08/05
在人工智慧當紅的這時代,所謂機器學習與深度學習是什麼呢? 一、人工智慧(Artificial Intelligence)' 泛指所有人工智慧的領域,包括自動控制、自動駕駛的車子、工廠的機械手臂或是機器人都屬於AI領域。 二、機器學習(Machine Learning) 在人工智慧的範圍裡面有
2025/08/04
人工智慧是現在非常多人討論的議題,那麼人工智慧到底是什麼?又應該如何去定義它呢? 在現在這個時間點,有很多的東西都自稱為人工智慧,例如各種的智慧家電和3C產品,但是其實很多家電都沒有人工智慧的功能。這就跟原子筆一樣,在以前原子、原子彈、核能很紅的時候,商家把原子這個名詞直接用在新賣的筆上,但其實一
2025/08/04
人工智慧是現在非常多人討論的議題,那麼人工智慧到底是什麼?又應該如何去定義它呢? 在現在這個時間點,有很多的東西都自稱為人工智慧,例如各種的智慧家電和3C產品,但是其實很多家電都沒有人工智慧的功能。這就跟原子筆一樣,在以前原子、原子彈、核能很紅的時候,商家把原子這個名詞直接用在新賣的筆上,但其實一
看更多
你可能也想看
Thumbnail
2025 vocus 推出最受矚目的活動之一——《開箱你的美好生活》,我們跟著創作者一起「開箱」各種故事、景點、餐廳、超值好物⋯⋯甚至那些讓人會心一笑的生活小廢物;這次活動不僅送出了許多獎勵,也反映了「內容有價」——創作不只是分享、紀錄,也能用各種不同形式變現、帶來實際收入。
Thumbnail
2025 vocus 推出最受矚目的活動之一——《開箱你的美好生活》,我們跟著創作者一起「開箱」各種故事、景點、餐廳、超值好物⋯⋯甚至那些讓人會心一笑的生活小廢物;這次活動不僅送出了許多獎勵,也反映了「內容有價」——創作不只是分享、紀錄,也能用各種不同形式變現、帶來實際收入。
Thumbnail
嗨!歡迎來到 vocus vocus 方格子是台灣最大的內容創作與知識變現平台,並且計畫持續拓展東南亞等等國際市場。我們致力於打造讓創作者能夠自由發表、累積影響力並獲得實質收益的創作生態圈!「創作至上」是我們的核心價值,我們致力於透過平台功能與服務,賦予創作者更多的可能。 vocus 平台匯聚了
Thumbnail
嗨!歡迎來到 vocus vocus 方格子是台灣最大的內容創作與知識變現平台,並且計畫持續拓展東南亞等等國際市場。我們致力於打造讓創作者能夠自由發表、累積影響力並獲得實質收益的創作生態圈!「創作至上」是我們的核心價值,我們致力於透過平台功能與服務,賦予創作者更多的可能。 vocus 平台匯聚了
Thumbnail
Hi 我是 VK~ 很常會看到 Scale AI 的消息,粗淺知道他們是在做資料標記(Data Labeling,或稱數據標記)。近來也有討論說資料會先用完,還是算力。剛好趁著這個機會深入了解 Scale AI 在做些什麼,他們如何解決資料標記的問題,以及在這領域中還有哪些玩家。 這期來聊聊 S
Thumbnail
Hi 我是 VK~ 很常會看到 Scale AI 的消息,粗淺知道他們是在做資料標記(Data Labeling,或稱數據標記)。近來也有討論說資料會先用完,還是算力。剛好趁著這個機會深入了解 Scale AI 在做些什麼,他們如何解決資料標記的問題,以及在這領域中還有哪些玩家。 這期來聊聊 S
Thumbnail
在當今快速變化的數位時代,企業面臨著前所未有的數據處理需求。為了應對這些挑戰,企業紛紛建立自己的大型語言模型(LLM),利用大量數據進行訓練,讓模型能夠理解並生成自然語言,從而實現人機協作,優化業務流程並提升客戶體驗。
Thumbnail
在當今快速變化的數位時代,企業面臨著前所未有的數據處理需求。為了應對這些挑戰,企業紛紛建立自己的大型語言模型(LLM),利用大量數據進行訓練,讓模型能夠理解並生成自然語言,從而實現人機協作,優化業務流程並提升客戶體驗。
Thumbnail
本文介紹了人工智慧(AI)及機器學習(ML)的基本概念和關係,探討了數據在機器學習中的重要性,以及深度學習和生成式人工智慧的應用。
Thumbnail
本文介紹了人工智慧(AI)及機器學習(ML)的基本概念和關係,探討了數據在機器學習中的重要性,以及深度學習和生成式人工智慧的應用。
Thumbnail
本文要探討AI的任務與實戰場景。AI技術已深入生活各層面,從違約預測到都市交通管理。AI任務主要有三類:數值型資料處理、自然語言處理(NLP)和電腦影像辨識。時間序列資料和強化學習方法(如AlphaGo)也引起廣泛關注。AI演算法和方法因應不同學派和技術發展而多樣化,了解這些基礎有助選擇適合研究方向
Thumbnail
本文要探討AI的任務與實戰場景。AI技術已深入生活各層面,從違約預測到都市交通管理。AI任務主要有三類:數值型資料處理、自然語言處理(NLP)和電腦影像辨識。時間序列資料和強化學習方法(如AlphaGo)也引起廣泛關注。AI演算法和方法因應不同學派和技術發展而多樣化,了解這些基礎有助選擇適合研究方向
Thumbnail
本文談及資料科學的領域與分工。首先是建造一個AI的研發流程,資料收集到 AI 模型訓練的過程,AI經歷這一切流程被創造出來並產生價值;再來本文也提及在這個領域中的各種腳色、資料工程師、數據庫工程師、資料科學家和資料分析師的各種介紹。並且強調跨領域合作的重要性。
Thumbnail
本文談及資料科學的領域與分工。首先是建造一個AI的研發流程,資料收集到 AI 模型訓練的過程,AI經歷這一切流程被創造出來並產生價值;再來本文也提及在這個領域中的各種腳色、資料工程師、數據庫工程師、資料科學家和資料分析師的各種介紹。並且強調跨領域合作的重要性。
Thumbnail
隨著數據資產化進程的加速,數據不僅成為企業的重要資源,也逐漸影響到我們的日常生活。了解數據資產化如何改變我們的生活,以及我們如何利用這個趨勢進行套利,對每個人來說都是有價值的。
Thumbnail
隨著數據資產化進程的加速,數據不僅成為企業的重要資源,也逐漸影響到我們的日常生活。了解數據資產化如何改變我們的生活,以及我們如何利用這個趨勢進行套利,對每個人來說都是有價值的。
Thumbnail
在科技發展的浪潮中,生成式AI無疑是引領未來的關鍵力量。透過深度學習技術,AI系統能夠從大量資料中發掘規律,並創造出全新的內容,無論是文字、圖像、音頻還是視頻,都可以在AI的加持下重新定義。
Thumbnail
在科技發展的浪潮中,生成式AI無疑是引領未來的關鍵力量。透過深度學習技術,AI系統能夠從大量資料中發掘規律,並創造出全新的內容,無論是文字、圖像、音頻還是視頻,都可以在AI的加持下重新定義。
Thumbnail
數位化時代中,人工智能(AI)已成為推動創新和進步的關鍵力量。本文探討AI的現狀、挑戰以及未來可能性,並提出負責任地發展和使用AI的思考。
Thumbnail
數位化時代中,人工智能(AI)已成為推動創新和進步的關鍵力量。本文探討AI的現狀、挑戰以及未來可能性,並提出負責任地發展和使用AI的思考。
Thumbnail
本文介紹了人工智慧的定義和發展,以及在醫療、金融、製造、交通、教育等領域的應用。探討了AI的優勢和挑戰,以及AI在未來社會中的角色。作者提出了對AI發展的個人觀點和建議,強調了謹慎發展AI並制定相關法律法規的重要性。
Thumbnail
本文介紹了人工智慧的定義和發展,以及在醫療、金融、製造、交通、教育等領域的應用。探討了AI的優勢和挑戰,以及AI在未來社會中的角色。作者提出了對AI發展的個人觀點和建議,強調了謹慎發展AI並制定相關法律法規的重要性。
Thumbnail
本文揭示當前工業領域的一場無聲革命:智慧製造。在引言中,我們探討了智慧製造如何開啟生產力新紀元,隨後深入分析大數據如何加速生產過程中的創新與效率,成為本次革命的核心動力。從學術研究到現實應用,本文探討了智慧製造領域的發展脈絡,以及學界與業界共同推進的不可逆轉動能。
Thumbnail
本文揭示當前工業領域的一場無聲革命:智慧製造。在引言中,我們探討了智慧製造如何開啟生產力新紀元,隨後深入分析大數據如何加速生產過程中的創新與效率,成為本次革命的核心動力。從學術研究到現實應用,本文探討了智慧製造領域的發展脈絡,以及學界與業界共同推進的不可逆轉動能。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News