付費限定

A/B測試的技巧和企業案例:商業分析的精髓、貝佐斯改造華盛頓郵報的數位轉型|怪獸科技公司 S2E12.2

更新於 發佈於 閱讀時間約 5 分鐘

在這個數據驅動的時代,有效的統計測試與數據分析,對於將數據轉換成洞察,做出決策的過程中扮演非常重要的角色。

有別於跳入數據海,試圖直接從數據中找出洞察,商業分析的精髓在於先思考 so what——從定義目標(objective)開始,做出商業決策的雛形後,才用數據去支持假說。

本文將帶你了解如何透過 A/B 測試和數據分析,從人性的角度獲得深刻的洞察,並確保你的發現不僅是隨機事件,而是具有真正的意義。

再者,透過《華盛頓郵報》的數位轉型案例,我們可以思考透過數據分析和技術創新來重塑商業模式,並觀察亞馬遜創辦人貝佐斯的思路,是如何將一家傳統報社轉變為一個兼具媒體與技術基礎的公司。

前情提要:
數據分析和 A/B 測試:Netflix為何吸引人、Spotify怎麼用數據做出超猛文案?|怪獸科技公司 S2E12.1

看見數據問為什麼,從人性獲得洞察

無論你何時進行統計測試,有個重要的告誡要謹記在心:需要檢查你觀察後所獲得的發現,是真的有意義,或者只是隨機發生。

當公司在進行 A/B 測試的時候,實驗者會報告一個特定版本的指標,以及另一個版本比較的結果。他們同時也會報告 p 值,說明觀察到的差異有可能是隨機的機率。

p 值是一個介於 0 到 1 之間的數字,用於表示統計結果是否具有意義(用於測量觀察結果與偶然發生的概率)。p 值越小,結果越有可能不是偶然的。

一般來說,如果 p 值小於 0.05(例如有小於 5%的機會,這個差異是隨機的),可以假設這個差異是有意義的,或者稱為「在統計上有意義」(statistically significant)。否則,不能肯定結果不是單純靠運氣。


【延伸閱讀】


選擇最有利的機會:什麼是摘櫻桃?

數據篩選的操作,在英文裡有一個特別的名字:摘櫻桃(Cherry-Pick)。這個詞原本是用來描述人們從樹上摘取櫻桃的動作,因為樹木朝向等原因,櫻桃並不會同時成熟,所以需要農民在摘取時進行挑選。

簡單來說,摘櫻桃就是選擇最有利的機會。

摘櫻桃的好處是,可以讓數據的統計結果往對使用者有利的方向改變。

縮小問題,檢視外部問題,檢視內部用戶體驗漏斗

在實務工作如果進行 A/B 測試,我們要確保對用戶分組時,已經考慮到了取樣的均勻性。而且,盡量讓實驗運行的時間長一點,可以多收集數據,這樣也可以讓取樣更加準確(重複取樣)。

評估指標:主要、次要指標

  • 要能變不好才能變好
  • 有時候不好是追蹤有問題
  • 新的不一定不好、可能要適應
  • 確定評估指標有平衡指標(counter-metrics,反指標,即衡量反效果的指標)

企業案例:數位轉型後的報社,亞馬遜CEO改造百年郵報

為什麼《華盛頓郵報》的文章都有兩個版本的標題呢?這個技巧就是 A/B 測試。

貝佐斯在 2013 年,以 2.5 億美元收購頻臨倒閉的華盛頓郵報(The Washington Post),在不到三年的時間裡,他徹底改變了這家有著 140 年歷史的報紙,讓它成為一家兼具媒體與技術底子的新公司。

raw-image

《華盛頓郵報》擅長報導美國國內政治動態,目前也是擁有流量最大新聞網站之一,曾經揭發「水門案」,還有獲得 47 座普利茲新聞獎(Pulitzer Prize),但是它卻在 2009 年第二次網路經濟崛起開始走下坡。

當時接手的葛拉漢家族,在報份急遽下挫的情況下,只好將這家相當具有份量的傳媒,轉賣給電商巨頭亞馬遜。

重新定位為媒體與技術公司

一般而言,商界人士會買下媒體,主要都看中其在政治圈的影響力,但亞馬遜的執行長貝佐斯接手後,反而是著手改造華盛頓郵報的體質,並重新將其定位為「媒體與技術公司」。

貝佐斯採取了兩項作法,先是大量招募軟體工程師,人數高達七百人,這個規模已不亞於矽谷任何一家軟體公司;其次華盛頓郵報全新開發了一套名為“Arc”的軟體,為出版業提供數據分析與行銷的功能,達到由資料驅動(data-driven)新聞決策的目的。

以行動支持創作者!付費即可解鎖
本篇內容共 2299 字、0 則留言,僅發佈於怪獸科技✖️商管人文、怪獸科技✖️人生職涯你目前無法檢視以下內容,可能因為尚未登入,或沒有該房間的查看權限。
留言
avatar-img
留言分享你的想法!
avatar-img
怪獸科技公司✖️沙龍
30.0K會員
468內容數
你是否有想過,為什麼看過這麼多成功的人的例子,聽過這麼多厲害的人他們的分享,有時候自己卻好像只是在原地踏步呢?《怪獸科技公司》第二季將從科技產業的角度切入,透過跨領域的視野,帶你掌握各種必備的自我管理能力與心法,一起用科技去思考你的人生。
2024/12/06
《從 0 到 1》探討開創獨占新事業的重要,但吳軍博士指出,真正的挑戰在於從科學到技術、再到商業成功的完整過程,而非僅僅是一個好點子。本文透過過蘋果、微軟與 Google 的案例,思考使用者體驗與持續改進,以及宏大的變革目標(MTP)如何引導創業者走向成功。
Thumbnail
2024/12/06
《從 0 到 1》探討開創獨占新事業的重要,但吳軍博士指出,真正的挑戰在於從科學到技術、再到商業成功的完整過程,而非僅僅是一個好點子。本文透過過蘋果、微軟與 Google 的案例,思考使用者體驗與持續改進,以及宏大的變革目標(MTP)如何引導創業者走向成功。
Thumbnail
2024/06/21
本次專訪,怪獸科技公司和 Spotify 資深產品經理 Agnes 將與我們探討五大 PM 產品實戰問題,帶你瞭解如何有效提升產品團隊效能、解決商業問題,以及最大化 Side Project 的成果,在競爭激烈的市場中脫穎而出(沒經驗、跨領域轉職的菜鳥也可以)!
Thumbnail
2024/06/21
本次專訪,怪獸科技公司和 Spotify 資深產品經理 Agnes 將與我們探討五大 PM 產品實戰問題,帶你瞭解如何有效提升產品團隊效能、解決商業問題,以及最大化 Side Project 的成果,在競爭激烈的市場中脫穎而出(沒經驗、跨領域轉職的菜鳥也可以)!
Thumbnail
2024/02/28
探索職涯發展需要適時進行 A/B 測試和數據分析,以找出最佳策略。本文討論瞭如何在人生重大決策中運用 A/B 測試的觀念,以及 20/80 法則在職涯和專案管理上的重要性。此外,數據和了解用戶需要同等重要,並探究了目標設定和修正的策略。文章中提供了豐富的例子和建議,適合職場新鮮人參考。
Thumbnail
2024/02/28
探索職涯發展需要適時進行 A/B 測試和數據分析,以找出最佳策略。本文討論瞭如何在人生重大決策中運用 A/B 測試的觀念,以及 20/80 法則在職涯和專案管理上的重要性。此外,數據和了解用戶需要同等重要,並探究了目標設定和修正的策略。文章中提供了豐富的例子和建議,適合職場新鮮人參考。
Thumbnail
看更多
你可能也想看
Thumbnail
孩子寫功課時瞇眼?小心近視!這款喜光全光譜TIONE⁺光健康智慧檯燈,獲眼科院長推薦,網路好評不斷!全光譜LED、180cm大照明範圍、5段亮度及色溫調整、350度萬向旋轉,讓孩子學習更舒適、保護眼睛!
Thumbnail
孩子寫功課時瞇眼?小心近視!這款喜光全光譜TIONE⁺光健康智慧檯燈,獲眼科院長推薦,網路好評不斷!全光譜LED、180cm大照明範圍、5段亮度及色溫調整、350度萬向旋轉,讓孩子學習更舒適、保護眼睛!
Thumbnail
創作者營運專員/經理(Operations Specialist/Manager)將負責對平台成長及收入至關重要的 Partnership 夥伴創作者開發及營運。你將發揮對知識與內容變現、影響力變現的精準判斷力,找到你心中的潛力新星或有聲量的中大型創作者加入 vocus。
Thumbnail
創作者營運專員/經理(Operations Specialist/Manager)將負責對平台成長及收入至關重要的 Partnership 夥伴創作者開發及營運。你將發揮對知識與內容變現、影響力變現的精準判斷力,找到你心中的潛力新星或有聲量的中大型創作者加入 vocus。
Thumbnail
#週一推薦 #行銷人必學 數據洞察行銷的專場分享 面對瞬息萬變的數據行銷時代,您準備好了嗎? 在我眼中,沒有難做的市場,只有看不見的藍海 而準確的線上數據越來越能夠協助我們洞悉商機 #消費者旅程的洞察 隨著第三方cookie消失|各大品牌和電商積極收集從公領域轉到私領域流量的數據,如果線上和
Thumbnail
#週一推薦 #行銷人必學 數據洞察行銷的專場分享 面對瞬息萬變的數據行銷時代,您準備好了嗎? 在我眼中,沒有難做的市場,只有看不見的藍海 而準確的線上數據越來越能夠協助我們洞悉商機 #消費者旅程的洞察 隨著第三方cookie消失|各大品牌和電商積極收集從公領域轉到私領域流量的數據,如果線上和
Thumbnail
在行銷圈十幾年,知道最難的事情是如何對標精準的受眾,瞭解清楚的受眾輪廓,才有辦法去制定有效益的行銷策略與方案。Sowork摘星的CJ是能夠把消費者輪廓做到最符合受眾的,同時最新的數據為王和數據紅利書籍也是市場上的熱門話題,這些關鍵字都能幫助提升文章的搜尋排名。
Thumbnail
在行銷圈十幾年,知道最難的事情是如何對標精準的受眾,瞭解清楚的受眾輪廓,才有辦法去制定有效益的行銷策略與方案。Sowork摘星的CJ是能夠把消費者輪廓做到最符合受眾的,同時最新的數據為王和數據紅利書籍也是市場上的熱門話題,這些關鍵字都能幫助提升文章的搜尋排名。
Thumbnail
EP24 精華重點: 1.做好市場調查和分析,先找到目標客群,再開發產品。 2.透過最小可行性產品(MVP)模式,先做小批量產品,並藉由問卷、試吃會等方式了解消費者反應,驗證市場需求。 3.親身實地面對顧客,了解真實反應和需求,做為後續產品改良的參考。 4.產品差異化很重要
Thumbnail
EP24 精華重點: 1.做好市場調查和分析,先找到目標客群,再開發產品。 2.透過最小可行性產品(MVP)模式,先做小批量產品,並藉由問卷、試吃會等方式了解消費者反應,驗證市場需求。 3.親身實地面對顧客,了解真實反應和需求,做為後續產品改良的參考。 4.產品差異化很重要
Thumbnail
在當今快速變化的市場環境中,準確預測客戶需求並迅速應對市場動態成為企業成功的關鍵。本文將探討客戶需求預測的重要性、市場動態的迅速變化以及企業如何透過先進技術如人工智慧(AI)和大數據分析來提升市場反應速度和精準度。
Thumbnail
在當今快速變化的市場環境中,準確預測客戶需求並迅速應對市場動態成為企業成功的關鍵。本文將探討客戶需求預測的重要性、市場動態的迅速變化以及企業如何透過先進技術如人工智慧(AI)和大數據分析來提升市場反應速度和精準度。
Thumbnail
在當今數位化的商業環境中,新商品開發已經不再僅依賴傳統的市場調查和直覺決策。隨著大數據和人工智慧技術的迅速發展,數據驅動的開發策略成為推動創新和保持市場競爭力的關鍵。本文將探討如何利用數據驅動的方法來優化新商品開發流程,從而更有效地滿足消費者需求,提高產品成功率。
Thumbnail
在當今數位化的商業環境中,新商品開發已經不再僅依賴傳統的市場調查和直覺決策。隨著大數據和人工智慧技術的迅速發展,數據驅動的開發策略成為推動創新和保持市場競爭力的關鍵。本文將探討如何利用數據驅動的方法來優化新商品開發流程,從而更有效地滿足消費者需求,提高產品成功率。
Thumbnail
本文以一成功案例探討如何運用數據洞察促進保險公司業務發展。通過定期熱度報告分析、GPT產生報表、個性化服務、先進數據分析、精準商品評論情緒分析和個性化商品推薦模型等解決方案,提升客戶留存率、新客戶獲取率及市場份額。
Thumbnail
本文以一成功案例探討如何運用數據洞察促進保險公司業務發展。通過定期熱度報告分析、GPT產生報表、個性化服務、先進數據分析、精準商品評論情緒分析和個性化商品推薦模型等解決方案,提升客戶留存率、新客戶獲取率及市場份額。
Thumbnail
有別於試圖直接從數據中找出洞察,商業分析的精髓在於先思考 so what——從定義目標開始,做出商業決策的雛形後,才用數據去支持假說。這篇文章介紹 A/B 測試的技巧,以及摘櫻桃的應用,解說數據篩選的操作、摘櫻桃的好處,以及企業案例:數位轉型後的報社,亞馬遜CEO貝佐斯改造百年郵報。
Thumbnail
有別於試圖直接從數據中找出洞察,商業分析的精髓在於先思考 so what——從定義目標開始,做出商業決策的雛形後,才用數據去支持假說。這篇文章介紹 A/B 測試的技巧,以及摘櫻桃的應用,解說數據篩選的操作、摘櫻桃的好處,以及企業案例:數位轉型後的報社,亞馬遜CEO貝佐斯改造百年郵報。
Thumbnail
在敏捷的開發環境中,數據分析已成為企業和個人實現策略優化的關鍵工具,如何快速有效地進行 A/B 測試非常很重要。透過數據分析,Netflix 和 Spotify 這些串流平台得以透過數據優化行銷策略或是找出洞察,做出商業決策。 這篇文章開始,我們要導入數據分析的概念,探討 A/B 測試如何幫助我們
Thumbnail
在敏捷的開發環境中,數據分析已成為企業和個人實現策略優化的關鍵工具,如何快速有效地進行 A/B 測試非常很重要。透過數據分析,Netflix 和 Spotify 這些串流平台得以透過數據優化行銷策略或是找出洞察,做出商業決策。 這篇文章開始,我們要導入數據分析的概念,探討 A/B 測試如何幫助我們
Thumbnail
在競爭激烈的商業世界,1人創業的路途充滿了挑戰和機遇。 不少創業者陷入失敗的困局,因爲他們都忽略了一件很重要的事情——市場測試。 市場測試為創業者提供寶貴的洞察,幫助他們更好地理解他們的目標市場,預測需求,並在競爭激烈的環境中脫穎而出。 而一些常見的市場測試的致命錯誤卻可能讓創業者付出沉重的代價。
Thumbnail
在競爭激烈的商業世界,1人創業的路途充滿了挑戰和機遇。 不少創業者陷入失敗的困局,因爲他們都忽略了一件很重要的事情——市場測試。 市場測試為創業者提供寶貴的洞察,幫助他們更好地理解他們的目標市場,預測需求,並在競爭激烈的環境中脫穎而出。 而一些常見的市場測試的致命錯誤卻可能讓創業者付出沉重的代價。
Thumbnail
本文分享瞭如何觀察後臺廣告數據,並根據數據分析來進行廣告投放的執行過程。作者強調了轉換率與轉換成本在不同產業與產品價格帶下的影響,並提到了如何根據數據來選擇最適合的廣告版本進行投放。文章結合作者個人觀點和經驗進行了廣告數據分析,值得一讀。
Thumbnail
本文分享瞭如何觀察後臺廣告數據,並根據數據分析來進行廣告投放的執行過程。作者強調了轉換率與轉換成本在不同產業與產品價格帶下的影響,並提到了如何根據數據來選擇最適合的廣告版本進行投放。文章結合作者個人觀點和經驗進行了廣告數據分析,值得一讀。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News