方格精選

上億行銷預算的決策引擎:在德國擔任行銷分析師的學習 (3)

閱讀時間約 7 分鐘

前導連結

上億行銷預算的決策引擎:在德國擔任行銷分析師的學習(1) - MTA行銷歸因

上億行銷預算的決策引擎:在德國擔任行銷分析師的學習(2) - MMM行銷組合


在前面兩篇的討論中,身為行銷分析人員的我們終於對於行銷績效有點理解了,但千辛萬苦地把模型跟報表建立起來後,把結果呈現到行銷主管面前時,一定會被問:你有信心這個數字是對的嗎?我如果聽你的建議,我會在電視廣告多下1千萬,你有信心他會回本?

其實這件事情真的很難說的準,沒有人真的知道真實世界的全貌,任何預測模型都必定有偏誤,最常遇到的是統計模型的結果跟商業直覺,或是過去的方法結果差異很多,那我們要怎麼去檢證跟溝通?

統計準確性跟業務經驗的攻防

統計常用的檢證方式,是做任何數據模型都相當好用的工具,例如顯著性(Significance)越高越好,代表訊號越明確,判定係數(R-Square)越高越好,代表模型解釋力很高,絕對百分比誤差(MAPE)越小越好,代表預測的準確度越高。這些統計檢證通常讓我們比較有辦法跟決策端溝通:至少在統計上,這個模型的預測力如何,以及我們有多少的信心說出這個結論

但就算我端出一個統計檢證完美,邏輯縝密的模型,大家會相信嗎?經濟學人曾經做過一個調查報告,指出大多數的管理層看到跟自己經驗不符的數據時,他們會大力挑戰,很多時候會找替代的分析方式來做出自己比較能接受的結果,我自己的經驗是,當分析結果管理層的利益有潛在衝突時,會更容易被挑戰

那不如做個實驗吧?我們要的不是相關性,而是因果關係

「做了才知道」通常是解決大家疑慮的最後手段,畢竟大多數的統計模型都在講相關性,而非因果關係,只有實際做了才知道有什麼結果。但是,躁進的丟入上百萬的預算,或是砍掉一整個部門都不是縝密決策的方式,更不可能有主管答應你這麼做

「做個實驗吧?」是近十年來蠻常見的做法,電子商務來說,跟一些主要的廣告投放平台例如Google,Facebook合作,都可以進行實驗設計跟分析,大致來說有幾大步驟:

1. 設想實驗目標

與行銷分析相關的實驗通常和預算有關,像是:我想知道在法國多花100萬在Youtube是不是會維持一樣的投資報酬率?我想知道把品牌關鍵字廣告減少一半的預算是不是可以靠關鍵字搜尋補上?廣播,電視這些傳統媒體還要再投嗎,要投多少?

2. 設計實驗

針對不同實驗的客群或地區,哪些地區/客群應該被選為實驗組,哪些應該被選為對照組,例如Google就有推出以郵遞區號為基礎的Geo-Based實驗單位,搭配上企業過去在各區域的業績,就可以稍微計算出哪些適合當實驗組,哪些適合當對照組

有些傳統媒體不允許小地區投放,那該怎麼做實驗呢?以美國為例可以用“州“為單位,德國以“邦”為單位,跨國企業甚至可以用“國“為單位來進行實驗

有幾個簡要的原則:

  • 實驗組跟對照組越多,越能有深入的結果
  • 實驗越大(投入越多或是刪減預算越多),越容易讀取有效的訊號
  • 實驗單位越大,環境的雜訊越多,實驗的準確性越低

3. 實驗分析

如果在實驗室裡面做實驗,通常的想像是:實驗組跟對照組在實驗之前沒有差別,實驗開始後,我們會看到實驗組的改變,實驗組跟對照組的成果就是實驗的結果

在現實世界裡的實驗要達到這個條件相當困難,例如「實驗組跟對照組在實驗之前沒有差別」,沒有差別是在業績上,毛利上或是顧客轉化率沒有差別?是過去三個月,過去六個月沒有差別?是成長率,季節波動都一致?

「在實驗之後實驗組跟對照組的差異」這差異要怎麼讀?看起來若有似無的差異在統計上有沒有顯著?我要算一個月,兩個月,三個月?有沒有遞延效應?是每一個實驗組都有相似的表現,還是有些沒有?我最後又該怎麼計算投資報酬率?

市面上有蠻多分析方法,例如Google就有推出一些模組讓分析師去套用,把上述的假設跟條件都想好之後,就能進行分析了

延伸資源:Google Causal Impact R - Package, Baysian Model Structural Time Series

4. 把實驗分析的結果丟回原有的模型

分析做完之後,我們就可以把實驗的結果當成真實的情況,運用這個結果來修正原本的MMM(行銷組合模型),把實驗的數據轉化成模型裡的參數,例如說:電視廣告的實驗結果顯示,投資報酬率是3,但原本的MMM模型算出來是5,那我就可以用3當成一個參考值來訓練模型

實驗也可用來調整模型中的商業假設,例如實驗結果顯示,Youtube的長尾效應大概只有兩週,而且逐日遞減,那我也可以拿來修正MMM裡面長尾效應的參數,實驗做得越多元,就越能理解不同行銷活動在不同市場,不同通路,不同預算下的投資報酬率,就可以讓行銷組合模型越來越貼近現實

即使實驗是個很棒的驗證方式,卻也不是定海神針,一個設計不良,分析不縝密的實驗的結果並不值得信賴,要能讀到有效的結果,實驗的成本也不低,要能大量,快速進行實驗更是非常困難,需要很成熟的分析量能還有密集的協調溝通,適用的企業,市場都相對限縮

在績效數字背後,是一群人努力的結果

在數據科學上我們有很多的工具,來剖析行銷人心中的蝴蝶效應,幫助決策者把錢花在更有效的地方,但如果你也在做行銷分析,請把這句話記在心裡,「在績效數字背後,是一群人努力的結果」

每個行銷活動都是行銷部門規劃數個月甚至多年的心血,當我們在某部門的行銷主管面前說:“去年你們行銷活動的投資報酬率根本不到1,所以我們不建議明年再投入任何預算”,不管是真是假,你的分析方法都不會得到他們的信任,他們更會窮盡方法挑戰你模型中的每一個假設,提出大量市場報告來反駁你的結論,因為他需要保住他的預算,團隊甚至工作

在過去幾年的經驗裡,我發現行銷分析的工作更多在於溝通,讓越多行銷人員可以參與,分享不同分析觀點,接納不同的假設,驗證再修正分析成果,在統計效度跟商業經驗中作平衡,這樣的分析團隊也才能被信任,慢慢地行銷分析的結果就能變成決策的基礎

延伸閱讀:在商業分析師的工作裡,人比數字更重要


感謝你的閱讀,喜歡這篇文章的話歡迎幫我們點讚分享,訂閱我們的專題喔!

為什麼會看到廣告
你的見面禮 Premium 閱讀權限 只剩下0 小時 0
109會員
66內容數
一分鐘可以做很多事情,可以燒壺咖啡,可以跑幾百米,還可以調素琴,閱金經。 而我們用這一分鐘,縮短你和德國的距離
留言0
查看全部
發表第一個留言支持創作者!
Dave Huang的沙龍 的其他內容
我們在第一篇提到基本的行銷歸因(Marketing attribution)概念,但這些歸因法則其實受惠於線上追蹤系統的興起,Google Analytics,Mapp或是公司內建的追蹤都可以讓行銷人員理解:消費者的點擊,瀏覽與交易,但把視野只放在線上蹤跡是很片面的
行銷分析在這幾年相當熱門,到底這個部門在做些什麼呢?行銷部門是典型公司最花錢的部門之一,把錢投資在越有效的管道,建立越強大的行銷策略,就是行銷主管最在乎的事情,所以行銷分析的目的說穿了只有一個:分析並找出最佳績效的組合
在專案裡會面對不同的窗口,有些屬於天使型的,不僅個性好,配合程度也高,因為對於新系統不熟悉,只要好好協助這類的客戶解決問題,後續的溝通合作不會太困難。但由於這類的窗口比較沒有系統經驗,所以要花比較多的精力去訓練與展示,初期的依賴程度也較高。  
這次筆者很幸運地能夠採訪到這位前輩。在德國求學時期即受到前輩非常多的幫助,是筆者在生活與職涯上的貴人。由於前輩有非常多的跨國管理經驗,筆者覺得這些經驗太寶貴了,可以幫助大家成長,遂決定花時間做訪談,來汲取前輩的人生智慧。   希望以下的內容能夠幫助在德國打拼的各位,得到更多啟發以及成長。   經歷
在德國求職有相當多的層面,在這邊我希望能濃縮自己在德國9年求學工作的知識經驗讓大家在求職時能有更多更好的準備。以下可以是一個checklist來幫助大家更完善地做足求職時的功課。
前一陣子正好在協助一個學生申請德國的研究所,這個學生有蠻多打工的經驗,也曾經在7-11當過一陣子的店員。在台灣生活過的人想必都知道,7-11店員大概是全世界零售業態最全能的店員,不但收銀上下架,還要能煮關東煮,微波,泡麵,清理各種機台,照顧老人,但這件事情要怎麼寫在履歷呢?
我們在第一篇提到基本的行銷歸因(Marketing attribution)概念,但這些歸因法則其實受惠於線上追蹤系統的興起,Google Analytics,Mapp或是公司內建的追蹤都可以讓行銷人員理解:消費者的點擊,瀏覽與交易,但把視野只放在線上蹤跡是很片面的
行銷分析在這幾年相當熱門,到底這個部門在做些什麼呢?行銷部門是典型公司最花錢的部門之一,把錢投資在越有效的管道,建立越強大的行銷策略,就是行銷主管最在乎的事情,所以行銷分析的目的說穿了只有一個:分析並找出最佳績效的組合
在專案裡會面對不同的窗口,有些屬於天使型的,不僅個性好,配合程度也高,因為對於新系統不熟悉,只要好好協助這類的客戶解決問題,後續的溝通合作不會太困難。但由於這類的窗口比較沒有系統經驗,所以要花比較多的精力去訓練與展示,初期的依賴程度也較高。  
這次筆者很幸運地能夠採訪到這位前輩。在德國求學時期即受到前輩非常多的幫助,是筆者在生活與職涯上的貴人。由於前輩有非常多的跨國管理經驗,筆者覺得這些經驗太寶貴了,可以幫助大家成長,遂決定花時間做訪談,來汲取前輩的人生智慧。   希望以下的內容能夠幫助在德國打拼的各位,得到更多啟發以及成長。   經歷
在德國求職有相當多的層面,在這邊我希望能濃縮自己在德國9年求學工作的知識經驗讓大家在求職時能有更多更好的準備。以下可以是一個checklist來幫助大家更完善地做足求職時的功課。
前一陣子正好在協助一個學生申請德國的研究所,這個學生有蠻多打工的經驗,也曾經在7-11當過一陣子的店員。在台灣生活過的人想必都知道,7-11店員大概是全世界零售業態最全能的店員,不但收銀上下架,還要能煮關東煮,微波,泡麵,清理各種機台,照顧老人,但這件事情要怎麼寫在履歷呢?
你可能也想看
Google News 追蹤
Thumbnail
本文探討了2024總統大選候選人的網路行銷策略。文章提到柯文哲在網路媒體的討論度遠超過其他兩位候選人,並分析了在YouTube、TikTok和Google上的搜尋聲量比較。作者也提到了短影片平臺對於候選人形象塑造的影響,以及在選民心中勾起興趣的重要性。此外,文章也探討了資訊真假查證的重要性以及市場變化對於行銷的影響。
Thumbnail
新奇的設計總會讓人想試試 我之前看過某個俄羅斯牛奶品牌用四個牛奶盒湊成藍貓圖案的介紹,就覺得台灣怎麼找不到這種有趣的例子,頂多只有像午後時光奶茶系列可以玩拼字遊戲。 在今天我喝牛奶時突然想要喝奶茶,而紅茶雖然有但卻不知道要加多少,這時候剛好滑到一個醬料瓶的廣告,不同的醬汁調配對應到不同的刻度,只
Thumbnail
行銷大師賽斯・高汀曾說:「人們買的不是產品與服務,而是買連結、故事、與其中的化學效應。」而動畫身為當代流行的行銷媒材,當中有三股力量使得動畫成為給力的行銷大聲公: 1.化繁為簡力 2.故事溝通力 3.創造注意力
Thumbnail
中小企業對台灣經濟發展至關重要,根據經濟部《2022 年中小企業白皮書》 中統計,全台中小企業佔全體企業 98% 以上,並佔台灣企業銷售額超過 5 成。在經濟部中小企業處的熱情支持下,長期在台灣培訓數位經濟與創意人才的 Meta,與台北市廣告業經營人協會(4A)攜手舉辦創意學院。
Thumbnail
B2B(企業對企業)和B2C(企業對消費者)在業務和行銷上有許多差異。以下是一些主要差異: 1. 客戶群體: - B2B:B2B業務面向其他企業或組織,通常具有較小且有限的客戶群體,但每個客戶的價值較高。 - B2C:B2C業務面向大眾消費者,客戶群體通常龐大,但每個客戶的價值
Thumbnail
晚安~又到了每週一信的時刻 勞動節連假大家有沒有好好休息到呢? 希望大家在假期過程,好好睡飽充電。 這幾週的銀色大門去了哪邊~又做了什麼呢? 就讓我們一起放鬆心情,閱讀本週的每週一信! 【本週與您分享👇】 【台灣綠燈籠運動-食材募集零錢箱:出發送達農民愛心捐贈食材】 記得今年度銀色大門入選:
Thumbnail
由於日本媒體種類實在太多,為了初步進入日本,且廣告費用有限的廣告主們,未來筆者會針對符合經濟效益的「成果報酬型廣告」,進行更細部的探討。在進入主題之前,我想不管是非常專業的行銷人也好,或是初學者想要了解線上廣告是甚麼的讀者也好,我們一定要先對線上廣告有基礎的認識之後,再來了解每一種廣告投放的細節。
Thumbnail
如何有效打廣告?泰昇廣告讓你不落人後,有效打響知名度!泰昇廣告掌握全球行銷趨勢、數位行銷市場洞察與行銷手法,升級品牌定位,一次掌握廣告平台,讓行銷之路比別人厲害!
Thumbnail
這陣子開始比較積極經營ig帳號,一邊嘗試調整構圖和色調,一邊廣泛田調,針對貼文內容做功課。看久了,即使缺乏嚴謹統計,也能輕易歸納出眾多網美和品牌帳號的共通之處,那就是飲食在他們版面上的重要性。
長假期間,到北海岸的淺水灣寫生,中午在高中同學開的法式餐廳用餐。餐廳中只有一組8大2小的家庭客,周邊還有約莫4張空桌。 我一邊用餐一邊速寫美食餐點,主廚走出來和我閒聊。過一會,有客人上門。 主廚看了一眼,看著對方說:「抱歉,已經客滿了,請找別間餐廳喔!」 來的客人默默的不甘願的離開了。 客人離開後我
Thumbnail
本文探討了2024總統大選候選人的網路行銷策略。文章提到柯文哲在網路媒體的討論度遠超過其他兩位候選人,並分析了在YouTube、TikTok和Google上的搜尋聲量比較。作者也提到了短影片平臺對於候選人形象塑造的影響,以及在選民心中勾起興趣的重要性。此外,文章也探討了資訊真假查證的重要性以及市場變化對於行銷的影響。
Thumbnail
新奇的設計總會讓人想試試 我之前看過某個俄羅斯牛奶品牌用四個牛奶盒湊成藍貓圖案的介紹,就覺得台灣怎麼找不到這種有趣的例子,頂多只有像午後時光奶茶系列可以玩拼字遊戲。 在今天我喝牛奶時突然想要喝奶茶,而紅茶雖然有但卻不知道要加多少,這時候剛好滑到一個醬料瓶的廣告,不同的醬汁調配對應到不同的刻度,只
Thumbnail
行銷大師賽斯・高汀曾說:「人們買的不是產品與服務,而是買連結、故事、與其中的化學效應。」而動畫身為當代流行的行銷媒材,當中有三股力量使得動畫成為給力的行銷大聲公: 1.化繁為簡力 2.故事溝通力 3.創造注意力
Thumbnail
中小企業對台灣經濟發展至關重要,根據經濟部《2022 年中小企業白皮書》 中統計,全台中小企業佔全體企業 98% 以上,並佔台灣企業銷售額超過 5 成。在經濟部中小企業處的熱情支持下,長期在台灣培訓數位經濟與創意人才的 Meta,與台北市廣告業經營人協會(4A)攜手舉辦創意學院。
Thumbnail
B2B(企業對企業)和B2C(企業對消費者)在業務和行銷上有許多差異。以下是一些主要差異: 1. 客戶群體: - B2B:B2B業務面向其他企業或組織,通常具有較小且有限的客戶群體,但每個客戶的價值較高。 - B2C:B2C業務面向大眾消費者,客戶群體通常龐大,但每個客戶的價值
Thumbnail
晚安~又到了每週一信的時刻 勞動節連假大家有沒有好好休息到呢? 希望大家在假期過程,好好睡飽充電。 這幾週的銀色大門去了哪邊~又做了什麼呢? 就讓我們一起放鬆心情,閱讀本週的每週一信! 【本週與您分享👇】 【台灣綠燈籠運動-食材募集零錢箱:出發送達農民愛心捐贈食材】 記得今年度銀色大門入選:
Thumbnail
由於日本媒體種類實在太多,為了初步進入日本,且廣告費用有限的廣告主們,未來筆者會針對符合經濟效益的「成果報酬型廣告」,進行更細部的探討。在進入主題之前,我想不管是非常專業的行銷人也好,或是初學者想要了解線上廣告是甚麼的讀者也好,我們一定要先對線上廣告有基礎的認識之後,再來了解每一種廣告投放的細節。
Thumbnail
如何有效打廣告?泰昇廣告讓你不落人後,有效打響知名度!泰昇廣告掌握全球行銷趨勢、數位行銷市場洞察與行銷手法,升級品牌定位,一次掌握廣告平台,讓行銷之路比別人厲害!
Thumbnail
這陣子開始比較積極經營ig帳號,一邊嘗試調整構圖和色調,一邊廣泛田調,針對貼文內容做功課。看久了,即使缺乏嚴謹統計,也能輕易歸納出眾多網美和品牌帳號的共通之處,那就是飲食在他們版面上的重要性。
長假期間,到北海岸的淺水灣寫生,中午在高中同學開的法式餐廳用餐。餐廳中只有一組8大2小的家庭客,周邊還有約莫4張空桌。 我一邊用餐一邊速寫美食餐點,主廚走出來和我閒聊。過一會,有客人上門。 主廚看了一眼,看著對方說:「抱歉,已經客滿了,請找別間餐廳喔!」 來的客人默默的不甘願的離開了。 客人離開後我