方格精選

三招移除重複資料

更新於 2024/09/10閱讀時間約 8 分鐘
來出個題目給你:
要怎麼知道售價的總和?簡單,選取 C 欄後看右下角的探索窗格、或是用 SUM 函式取得 C 欄的總和就可以了。可是如果再把這張表看得細一點,你會發現 RR003 這筆資料重複了好幾次!我們以為這次賺了很多錢,但其實這不是正確的總和。
這就是為什麼移除重複資料很重要。重複的資料有可能會讓我們做出錯誤的分析,進而做出錯誤的決定,在進行資料分析之前一定得做的一大步驟。
那麼,這次我會介紹「移除重複」功能UNIQUE條件式格式這三招,幫你甩開重複的資料。我們開始吧!
我把這次用到的試算表放這了,歡迎複製一份拿去練習唷!

「移除重複內容」功能

優缺點

👍 可快速處理大筆資料
👍 可選擇要分析的資料欄
👎 只能處理欄內重複的資料、不能分析列內重複的資料
如果你用這個功能,試算表會幫你留下第一筆資料,並把這之後重複的都移除。另外,這個功能會無視大小寫、一律去除重複的資料(例如「Apple」跟「apple」會被視為一樣的資料)。
打個比方,我想移除下面這張表裡的重複內容:
你可以看到第 12 到第 20 列的資料跟上面的重複了。
我們就來用「移除重複內容」功能,把重複的資料拿掉。選取你的資料範圍(A 欄到 E 欄),再到工具列的「資料」>「移除重複內容」:
會跳出來一個視窗:
如果你的資料有標題列,建議把第一個方塊勾起來,這樣試算表就可以讀到你的標題列,可以更好搜尋:
這邊有個「要分析的資料欄」,預設是全部勾選,這代表試算表會去分析、比對每一欄(A、B、C、D、E)內的資訊。回頭看看這張表:
如果你在剛剛的視窗勾選了全部的方塊,試算表就會以整列為標準來分析資料。這麼一來,第 12 列(編號 A3 的藍妤苓)以後的資料會被視為重複,因為和前面的資料完全一樣。執行結果就會像這樣:
如果在剛剛的視窗只勾選 E 欄的客戶類別,試算表就只會分析 E 欄內是否有重複的資料。這麼一來,就會是這個結果:
你可以依照你的需求,選擇要勾選的欄位,可以多嘗試幾次,看看哪種效果最適合你。

UNIQUE 函式

優缺點

👍 函式簡單、可和其他函式組裝併用
👍 可處理動態資料
👍 可處理列裡的重複資料(需要先轉置)
👎 函式結果不能直接編輯
👎 不能指定要分析的欄位
用了 UNIQUE,試算表一樣會幫你輸出第一筆資料、但結果不能編輯。另外,UNIQUE 不會移除拼字相同、大小寫不同的重複資料,例如「Apple」跟「apple」對 UNIQUE 來說會被視為不一樣的資料。
語法相當單純:
=UNIQUE(要分析的範圍)
我用同一組表格示範:
假設我們想在 G1 產生結果,在儲存格寫下:
=UNIQUE(A:E)
Enter 敲下去,來看看結果!
搞定囉,就這麼簡單!但我想提兩個小缺點,給你斟酌一下:
一:UNIQUE 的結果沒辦法編輯
如果你想要在 UNIQUE 的結果上編輯,會出現 #REF! 錯誤:
這是因為 UNIQUE 會抓取指定範圍內的資料後輸出結果,如果有任何新資料在那,就會擋住 UNIQUE 產生資料了。
二:UNIQUE 不能分析資料欄
就如同你剛剛看到的,UNIQUE 沒有其他設定欄位的參數能輸入。如果你有這個需求,可以考慮「移除重複功能」或是等等會提到的「條件式格式」。

移除單列的重複資料

不過 UNIQUE 還有個很方便的應用方式,它不僅能分析欄、也還能分析列的重複資料!舉例來說:
第二列的蘋果、香蕉、西瓜重複了好幾次。
要怎麼用?因為 UNIQUE 只會回傳裡面唯一的值,而不是,我們得先把列轉置成欄(請參考怎麼欄列互換(轉置)?)。這邊我用 TRANSPOSE 做示範。
在 A5 輸入:
=UNIQUE(TRANSPOSE(A2:H2))
就會得到:
搞定!如果你希望結果是是在列上顯示,你也可以在 UNIQUE 外面再包一層 TRANSPOSE 回去:
=TRANSPOSE(UNIQUE(TRANSPOSE(A2:H2)))
完成!
(2024/06/28 更新)讀者也提供了一個好方法:
=UNIQUE(1:1, 1)
=UNIQUE(1:1, TRUE)
將你想要移除重複資料的列放在第一個參數,並在之後寫上 1 或是 TRUE,這樣也可以喔!

移除多列的重複資料

如果是多列資料要移除呢?
也很簡單,我們只要把所有的值都合併到同一欄位、再丟給 UNIQUE 處理就可以了。這邊會用到 FLATTEN 函式,有了它、就可以把範圍內的值一欄一欄抓起來、再放在一起,就像是 flatten 字面上「攤平」的意思。
先把 A2 到 H10 併到同一欄:
=FLATTEN(A2:H10)
再用 UNIQUE 包起來就好了:
=UNIQUE(FLATTEN(A2:H10))

馬上就能用的組合技

另外,UNIQUE 也常拿來跟 QUERY 或 IMPORTRANGE 綁一起,提供兩份食譜給你參考:
移除 QUERY 的重複結果
=UNIQUE(QUERY(資料!A:D, "SELECT *"))
移除 IMPORTRANGE 的重複結果
=UNIQUE(IMPORTRANGE("https://...", "資料!A:D"))

條件式格式

優缺點

👍 可以細膩搜尋比較,斟酌哪個該刪、哪個不該刪
👍 可用視覺輔助、一有重複就會提醒
👎 面對較大筆的資料容易讓試算表卡住
👎 只能用一個欄作為分析對象
用條件式格式的功能可以讓重複的資料「亮」起來,你可以再依此決定哪筆資料要留、哪筆不要留。我在和同事分享試算表的時候,會在特定的欄上設定條件式格式,這麼一來,如果他們不小心放了重複的資料,他們就會馬上知道了。另外,使用這個功能時,試算表會無視大小寫字母,像是 Apple 跟 apple 都會被視為重複的資料。
不過,我想再提兩個小缺點:
  • 資料筆數較多的時候,條件式格式會稍稍拖慢試算表的處理速度。在執行之前可以看看資料的大小、再考慮一下要不要用這個功能。
  • 條件式格式只能用一個欄作為分析對象,也就不會像是「移除重複內容」一樣可以選定要分析的欄、UNIQUE 可以分析每個欄了。

使用步驟

選取資料範圍,工具列點選「格式」>「條件式格式設定」:
你應該會看到右手邊會出現一個窗格:
在「儲存格符合以下條件時套用指定格式」的下拉式選單裡,選擇「自訂公式:」。
假設我們要找 A 欄裡重複的資料好了。在「值或公式」那邊,我們輸入:
=COUNTIF($A$1:$A1, A1) > 1
來看看效果:
A 欄裡重複的資料「亮」起來了!你也可以繼續編輯你的格式,要變粗體、斜體、加底線、改字體顏色、儲存格顏色都可以。
如果你想要讓整列都出現條件式格式,你可以修改一下剛剛的那串:
=COUNTIF($A$1:$A1, $A1) > 1
執行結果就像這樣:
你就可以從這些亮起來的重複資料裡,手動刪除你不要的了。
如果資料很多、不想一直滑,你可以再搭配篩選器,依顏色篩選,篩選出重複的資料,再手動刪除。
設定篩選器的步驟也很簡單。先選取資料範圍,點選工具列,「資料」>「建立篩選器」:
你會看到第一列的每個儲存格出現了像是倒「三」的圖案。
在你剛剛條件式格式指定的欄位(以這次的例子來說,A 欄),點那個圖案後,選「依顏色篩選」>「填滿顏色」> 你剛剛指定的顏色。
這樣就篩選好了:

綜合比較

感謝你看到這邊!我把今天這三招的優缺點統整成一張表格:
取決你的資料和清除的需求,你可以綜合比較這三個方法,找到一個比較適合的,加油!

如果你喜歡這次的文章,歡迎你透過這些方法支持我:
・按下愛心、按下儲存
・留言告訴我你的想法
・加入喜特先生的官方沙龍,即時看到我發布的教學
・付費訂閱喜特先生的官方沙龍,加入每月小額訂閱方案
・追蹤喜特先生的 Facebook
・按這邊小額贊助我的創作!
想要看更多文章,歡迎來到我的 Notion 頁面找找有沒有你需要的資源喔!
我是喜特先生,Mr. Sheet,我們下個教學見!
avatar-img
14.0K會員
147內容數
簡潔,快速,有效, 讓你的日常生活、工作生產力大提升! ___ 快按「加入」,馬上追蹤所有喜特先生的更新,有 Google 試算表教學、Google Apps Script 的研究、數據分析課程的開箱,還有 Google 試算表疑難雜症的解題分享唷!💪
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
喜特先生官方沙龍 的其他內容
今天來介紹轉置(Transpose),兩招可以讓你輕鬆做好欄列互換 (ノ>ω<)ノ
我用 GOOGLEFINANCE 做了樣版,可以讓你抓股價、找匯率資訊、翻出股票過往的歷史資料,歡迎來看看!
今天要盡力徹底講解 QUERY 的 LIKE,以及實際應用上可以怎麼執行,快快進來 LIKE 一下!
要怎麼無視大小寫,用 QUERY 抓取資料呢?方法其實很簡單,一起看下去吧!
相對參照、絕對參照是新手必定要了解的重要觀念,歡迎來看看瞧瞧唷!
上次說完了 ARRAYFORMULA 的基本原理,這次來看看怎麼應用它們!一起來看看!
今天來介紹轉置(Transpose),兩招可以讓你輕鬆做好欄列互換 (ノ>ω<)ノ
我用 GOOGLEFINANCE 做了樣版,可以讓你抓股價、找匯率資訊、翻出股票過往的歷史資料,歡迎來看看!
今天要盡力徹底講解 QUERY 的 LIKE,以及實際應用上可以怎麼執行,快快進來 LIKE 一下!
要怎麼無視大小寫,用 QUERY 抓取資料呢?方法其實很簡單,一起看下去吧!
相對參照、絕對參照是新手必定要了解的重要觀念,歡迎來看看瞧瞧唷!
上次說完了 ARRAYFORMULA 的基本原理,這次來看看怎麼應用它們!一起來看看!
你可能也想看
Google News 追蹤
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
Thumbnail
不論你是預備求職或是準備求學。 只要你需要被對方進行面對面的檢核,那就避免不了會有面試的問題。 本文將從已經收到面試通知、如何爭取面試以及面試心法三個部分來說明。 並告訴你在面試當中 "見、聞、反" 三個重要的關鍵。
Thumbnail
這本《好好休息》由蔡宇哲博士和蔡嘉璇心理師所著,兩人同時也是知名Podcast節目「挖賽心理學」的主持人。他們在書中探討了現代人為何常感到疲累,不僅是腦力和體力的消耗,更多的是因為沒有真正好好休息。 透過三個步驟我們可以學會如何「好好休息」,讓你心不累、身體也不再疲憊。
Thumbnail
你有沒有過這樣的經驗,計畫出門踏青,結果天氣突變,讓你措手不及? 就像是天氣變化會影響你穿什麼衣服一樣😅 在行銷的世界裡,市場就像變幻莫測的天氣,當外部環境發生變化時,像是政治、經濟、社會、技術、環境和法律等因素,就會影響你的消費決策,而PESTEL分析就是你的預報員,幫助你未雨綢繆,讓你的行銷
Thumbnail
5/9-EP116【心境筆記】這三招根治「自我否定」壞習慣!《自在力》2#小倉鼠 #社畜逃脫筆記 #自我成長 #財務自由 #PODCASTS #說書 #思考 #筆記#山下英子 #斷捨離#俯瞰力#平安文化#俯瞰力#本質性#整體性#詮釋力#定義故事#有趣的靈魂#長期主義#共通點#相似性#自在
Thumbnail
時間管理對於現代人來說是一個挑戰。這篇文章將分享作者親身實驗下來確認可行且有效的提升效率的方式,藉此提升效率並保持工作品質,成功地擠出更多時間來做更多不同的事情。
Thumbnail
這是一篇關於如何寫出搶眼的臉書貼文,提高點擊率的實用指南。文章分享了三個有效的文案技巧:善用問號挑戰好奇心、掌握時事和厭世引發情感共鳴,以及用簡單易懂的方式呈現內容。透過這些方法,讓貼文成為焦點,吸引更多關注和互動。如果你想增加臉書貼文的點擊率,不妨嘗試這些技巧,讓你的貼文在網路世界中脫穎而出!
Thumbnail
在這篇文章中,我們將分享三個能讓你的FB文案成為焦點的秘訣。首先,透過問題引發讀者好奇心,讓他們立即產生疑問。其次,運用有趣的事實或統計數字吸引讀者目光,讓你的貼文在眾多訊息中脫穎而出。最後,利用故事將商品優勢傳達給讀者,建立情感共鳴,增加對商品的興趣和購買意願。記得要具備創意和獨特性,並深入了解目
Thumbnail
台灣的有線電視業正在經歷一場生死存亡的戰役。用戶數量持續下滑,國際頭部頻道不斷湧入,內部又有系統爭議和頻道提權爭議等問題。更糟糕的是,OTT TV的競爭也對有線電視產業造成了影響。在這種情況下,有線電視業者該如何求生存呢?
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
Thumbnail
不論你是預備求職或是準備求學。 只要你需要被對方進行面對面的檢核,那就避免不了會有面試的問題。 本文將從已經收到面試通知、如何爭取面試以及面試心法三個部分來說明。 並告訴你在面試當中 "見、聞、反" 三個重要的關鍵。
Thumbnail
這本《好好休息》由蔡宇哲博士和蔡嘉璇心理師所著,兩人同時也是知名Podcast節目「挖賽心理學」的主持人。他們在書中探討了現代人為何常感到疲累,不僅是腦力和體力的消耗,更多的是因為沒有真正好好休息。 透過三個步驟我們可以學會如何「好好休息」,讓你心不累、身體也不再疲憊。
Thumbnail
你有沒有過這樣的經驗,計畫出門踏青,結果天氣突變,讓你措手不及? 就像是天氣變化會影響你穿什麼衣服一樣😅 在行銷的世界裡,市場就像變幻莫測的天氣,當外部環境發生變化時,像是政治、經濟、社會、技術、環境和法律等因素,就會影響你的消費決策,而PESTEL分析就是你的預報員,幫助你未雨綢繆,讓你的行銷
Thumbnail
5/9-EP116【心境筆記】這三招根治「自我否定」壞習慣!《自在力》2#小倉鼠 #社畜逃脫筆記 #自我成長 #財務自由 #PODCASTS #說書 #思考 #筆記#山下英子 #斷捨離#俯瞰力#平安文化#俯瞰力#本質性#整體性#詮釋力#定義故事#有趣的靈魂#長期主義#共通點#相似性#自在
Thumbnail
時間管理對於現代人來說是一個挑戰。這篇文章將分享作者親身實驗下來確認可行且有效的提升效率的方式,藉此提升效率並保持工作品質,成功地擠出更多時間來做更多不同的事情。
Thumbnail
這是一篇關於如何寫出搶眼的臉書貼文,提高點擊率的實用指南。文章分享了三個有效的文案技巧:善用問號挑戰好奇心、掌握時事和厭世引發情感共鳴,以及用簡單易懂的方式呈現內容。透過這些方法,讓貼文成為焦點,吸引更多關注和互動。如果你想增加臉書貼文的點擊率,不妨嘗試這些技巧,讓你的貼文在網路世界中脫穎而出!
Thumbnail
在這篇文章中,我們將分享三個能讓你的FB文案成為焦點的秘訣。首先,透過問題引發讀者好奇心,讓他們立即產生疑問。其次,運用有趣的事實或統計數字吸引讀者目光,讓你的貼文在眾多訊息中脫穎而出。最後,利用故事將商品優勢傳達給讀者,建立情感共鳴,增加對商品的興趣和購買意願。記得要具備創意和獨特性,並深入了解目
Thumbnail
台灣的有線電視業正在經歷一場生死存亡的戰役。用戶數量持續下滑,國際頭部頻道不斷湧入,內部又有系統爭議和頻道提權爭議等問題。更糟糕的是,OTT TV的競爭也對有線電視產業造成了影響。在這種情況下,有線電視業者該如何求生存呢?