作為工程師你有「手滑」釀禍過嗎? 在工作上降低出錯率比追求好技術更為重要

閱讀時間約 4 分鐘
上月發生 118 所高中「學習歷程檔案」被工程師手滑誤刪的重大事故,一時間在科技圈造成熱議,有人檢討發包單位及外包廠商,也有人認為是工程師、政府採購法問題,追根究底,「工程師手滑」可能只是整起事件的冰山一角,今天 RUBY 大叔要跟大家聊聊這件事。
(圖片來源:Photo bycottonbro fromPexels
有備份為何還是救不回?
這次學習歷程檔案被刪,關鍵在於工程師「 VM 設定錯誤」,VM 指的是虛擬機器(Virtual Machine),可以想像成是另一個測試用的環境,雖然環境及功能都一樣,但它是「虛擬」的,無論在虛擬機上如何變更破壞,都不會影響到正式機器的運作,這次工程師他在替學校建立公版模組時,本應選用「正式版」的 VM 設定,卻不慎選到「測試版」的,導致所有的資料連結錯誤。
然而致命點是,「測試版」的 VM 環境因內建重開機後,就會自動還原成初始狀態,所以過去資料不會保留,就像以前學生時代,不管是在電腦教室偷安裝遊戲或偷下載影片,重新開機後通通都會被洗掉的道理一樣,這次的「學習歷程檔案」就是因為這樣而規組害了了(台語),想知道完整始末可以拜讀 iThome 這一篇;很多人問不是有備份,為何不能還原就好?由於當時在新舊機房搬遷期間,雖然有備份,但諸多環節上陰錯陽差導致備份機制沒有到位,不能挽救這次失誤。
真正問題不只是工程師手滑
其實「工程師手滑」只是整個事件的一部分,我在過去與發包單位、外包廠商合作的經驗裡,也看過一些反覆存在的問題,包含發包單位對資安認知的不足、或各種外包後所產生的規劃與資訊落差等問題,這些跟技術不一定有直接關係。當發包單位對資安認知有限,容易於層層預算規劃下截長補短、東拼西湊,甚至在執行後發現缺失環節再行追加,而在外包廠商的配合上,也容易因同一專案的負責人員都不同,在配合與建置上產生不一樣的認知及專業度,互踢皮球的戲碼我們也沒有少見過。
在這之中也牽涉到政府採購法及審查機制的規則,因而影響專案發展的細節與走向,雖然沒有辦法立即改善這種規則,但當大家對事件有所共識,並有志一同的想把工作圓滿完成時,工程師們除了盡力做好份內能做的事,避免淪為被收割的韭菜之外,也要知道,在工作上降低出錯率比追求好技術更為重要。
注意這兩件事降低出錯率
身為工程師的大家都有手滑過吧?別說工程師,一般人寄信都可能會發錯對象、不小心砍了重要資料等,我想說,手滑真的不可恥,只要你有注意以下兩件事,幾乎可以避掉大部分失誤。
1、建立備份認知
無論是哪一種備份方式,都務必要做完整,別認為有做到幾項就好,要以能維持整體系統不中斷為最終目標的做備份,例如採用 High Availability 的備援系統;過程中的檢查工作也很重要,尤其是移機前後、服務重新開放前後,或涉及大量資料轉移時,務必再三反覆確認服務狀態,像這次事件的工程師,很可能是對系統不熟悉或沒有反覆檢查所發生,當發生問題或資料遺失時,如果不確定下一步該怎麼做,千萬別貿然行動,應先停止操作,讓狀態凍結,再仔細檢查並求救,操作實行後,也必須回頭檢查最後設定,及早發現及早治療,降低出率。
像我平常跟客戶溝通時,碰到最大問題是備份廠商的選擇及預算,有時客戶傾向於找便宜的雲端/備份廠商,其實每間公司資料重要程度及規模不同,不一定要在備份上把預算花到最滿,建議可以用 Open mind 的精神多比較幾家,找到可靠的廠商及合適的備份方案,這件事之所以重要是因為,未來如果發生任何狀況,挽救資料的成本將可能更高,甚至資料也不一定百分之百救得回來。
2、制定對應的 SOP
大家有看過電影《地心引力》嗎?由珊卓布拉克飾演的太空人在燃料用盡的太空艙裡,靠著翻閱「太空人手冊」啟動船艙裡的機器,其實「太空人手冊」就是一種 SOP,不管是誰翻閱,都能在碰到問題時照著步驟操作。有句話說:預防勝於治療,只要在事發之前,針對各種可能發生的狀況制定完整的 SOP,你就能掌握自己的處理狀況,若是換成不同人操作,同樣也能照著流程解決。
雖然不確定這次「學習歷程檔案」有沒有進行 SOP 演練,但若碰到這種需要異地備份,或進行大規模的資料遷移時,建議不論是實體場域或虛擬場域,都要以最接近實際狀況的環境設定來演練,在演練時,因客戶檔案可能不符合原本設定的資料規則,最好先請客戶提供真實需要備份的資料,實際跑過一次,才能建立最完善的 SOP,大家可以把握以下三個原則:
原則1:盡可能模擬真實備份狀況
原則2:提高 SOP 演練完成度
原則3:確保系統可以正常運作
希望大家在碰到手滑狀況時,都能及時幫自己一把。
你也有工作上手滑的經驗嗎?歡迎留言跟 RUBY 大叔聊聊!
為什麼會看到廣告
avatar-img
34會員
36內容數
畢業生別怕,雖然是新鮮人但沒關係!
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
RUBY 大叔的沙龍 的其他內容
工程師很會修電腦?天天都在加班?有沒有工程師朋友跟RUBY大叔一樣,即使入行當了工程師多年,也做到高階主管,卻偶爾還是會被問到這些問題,這一篇想透過QA方式跟大家聊聊。
每個人在職場上或多或少都有犯錯過,但回頭檢視自己為何做不好,且力求改善的人並不多,很多時候不去做新的嘗試,就不會找到新的方法。今天跟大家聊聊初階工程師如何提高自己的經驗值以及工程師的當責之道是什麼。
這個世界不斷在變動,網路科技亦是如此,但「以人為本」的商業常態並沒有改變,這篇要從後台管理系統的重要性分享一些看法,讓新手工程師們可以從不同角度去學習應對,大家可以參考看看。
最近很多大學生都已畢業,但似乎還沒做好「畢業」準備就離開校園了,彷彿人生才剛開始就立刻「卡關」了,這幾年我也陸續開始擔任面試的工作,同時也觀察到很多職場新人對於職涯的發展抱有許多疑問。
工程師很會修電腦?天天都在加班?有沒有工程師朋友跟RUBY大叔一樣,即使入行當了工程師多年,也做到高階主管,卻偶爾還是會被問到這些問題,這一篇想透過QA方式跟大家聊聊。
每個人在職場上或多或少都有犯錯過,但回頭檢視自己為何做不好,且力求改善的人並不多,很多時候不去做新的嘗試,就不會找到新的方法。今天跟大家聊聊初階工程師如何提高自己的經驗值以及工程師的當責之道是什麼。
這個世界不斷在變動,網路科技亦是如此,但「以人為本」的商業常態並沒有改變,這篇要從後台管理系統的重要性分享一些看法,讓新手工程師們可以從不同角度去學習應對,大家可以參考看看。
最近很多大學生都已畢業,但似乎還沒做好「畢業」準備就離開校園了,彷彿人生才剛開始就立刻「卡關」了,這幾年我也陸續開始擔任面試的工作,同時也觀察到很多職場新人對於職涯的發展抱有許多疑問。
你可能也想看
Google News 追蹤
不管你念到大學或研究所,不管你是學士、碩士還是博士,在學校基本上你學不到的東西很多,例如科技業工程師做什麼,這是學校無法教你的事情,因為連教授都不知道他們在做什麼。 天下文化曾經在2007年出版過一本書叫做台積DNA,其中有講到一些台積工程師或可以說是科技業工程師的一些術語,但~~~說真的你沒有經
Thumbnail
工程上惡性的殺價,只會造成損害雙方的破壞力!
Thumbnail
確保沒有遺漏或錯誤 程式的完整資訊資料對於程式設計至關重要。這是因為只有透過完整的資訊,我們才能確保在程式設計中沒有任何遺漏或錯誤。最終,後台管理扮演著管理系統中所有動作和行為是否符合特定標準的重要角色。 採取不符合預期的行動 這種符合性的重要性在於,當我們設計程式時,希望使用者按照預期的方式
砍掉重練…。不知道什麼時候起這四個字成了資訊人員的工作原則之一,但是,只要系統修改的時間超出一定範圍,砍掉重練的時間成本絕對低於原系統修改。 可是在基礎建設的部份呢? 例如伺服器、網路設備方面呢? 其實,砍掉重練也是常有的事,尤其虛擬化後,Server要砍掉重練更是輕而舉。
Thumbnail
追求乾淨的程式碼是好的開始,但不要陷入過度設計的陷阱,導致程式難以維護。實際上,考慮團隊狀況和專注於解決真正的問題更為重要。了解公司的規模和現實情況,適時調整工作重心。技術不斷進步,使得寫程式變得更加容易,但這並不意味著工程師的角色會消失。在選擇技術時,也要考慮隱形成本有時簡單的解決方案反而更有效。
Thumbnail
資料庫之備份工作大都是自動執行,但是執行結果是否成功,需要安排人員去檢查,有時疏忽忘記確認作業,致備份工作失敗仍不知道,等到有一天需要回復舊有資料的場合時,才發現找不到過去某段期間的備份資料,造成無法彌補之後果。   2.    改善: 2.1 設計一執行檔,功能為打開備
由於電腦出問題,所以嶄新的業務暫時恢復紙本作業。陽曜德和工程師們連夜加班,好不容易才將電腦全部重灌完畢。但維修電腦可不是重灌就能解決的事,工程師們還必須從備用伺服器上將資料還原!有些紀錄甚至會被放棄還原——例如兩年前訪客名單。這部份陽曜德就幫不上忙了,他不知道備份伺服器是怎麼運作的,也沒興趣再入侵一
Thumbnail
在選大學校系,甚至是選擇職業的時候,大家通常都會關注產業前景跟工作報酬,但卻忽略了最重要的一點,你的熱情在何處?如果沒有熱情,連持續學習該領域都顯得困難,又要怎麼做到在產業中競爭呢?不是別人做的工作看上去好就是好,自己過得好與不好只有自己知道,也無須和他人比較。
Thumbnail
在企業IT環境,系統和數據的備份的重要性相信是不用解說,亦不用懷疑的。 但很時時候,企業忽略的並不是備份,而是Drill test的重要性。
Thumbnail
對理工出身的我而言,「人的感受」真的很難處理,因為你控制不了對方的感覺。 你想嘛!工程師寫程式,寫錯了,改一改重新編譯,我們沒有必要去對程式碼噓寒問暖呀~
不管你念到大學或研究所,不管你是學士、碩士還是博士,在學校基本上你學不到的東西很多,例如科技業工程師做什麼,這是學校無法教你的事情,因為連教授都不知道他們在做什麼。 天下文化曾經在2007年出版過一本書叫做台積DNA,其中有講到一些台積工程師或可以說是科技業工程師的一些術語,但~~~說真的你沒有經
Thumbnail
工程上惡性的殺價,只會造成損害雙方的破壞力!
Thumbnail
確保沒有遺漏或錯誤 程式的完整資訊資料對於程式設計至關重要。這是因為只有透過完整的資訊,我們才能確保在程式設計中沒有任何遺漏或錯誤。最終,後台管理扮演著管理系統中所有動作和行為是否符合特定標準的重要角色。 採取不符合預期的行動 這種符合性的重要性在於,當我們設計程式時,希望使用者按照預期的方式
砍掉重練…。不知道什麼時候起這四個字成了資訊人員的工作原則之一,但是,只要系統修改的時間超出一定範圍,砍掉重練的時間成本絕對低於原系統修改。 可是在基礎建設的部份呢? 例如伺服器、網路設備方面呢? 其實,砍掉重練也是常有的事,尤其虛擬化後,Server要砍掉重練更是輕而舉。
Thumbnail
追求乾淨的程式碼是好的開始,但不要陷入過度設計的陷阱,導致程式難以維護。實際上,考慮團隊狀況和專注於解決真正的問題更為重要。了解公司的規模和現實情況,適時調整工作重心。技術不斷進步,使得寫程式變得更加容易,但這並不意味著工程師的角色會消失。在選擇技術時,也要考慮隱形成本有時簡單的解決方案反而更有效。
Thumbnail
資料庫之備份工作大都是自動執行,但是執行結果是否成功,需要安排人員去檢查,有時疏忽忘記確認作業,致備份工作失敗仍不知道,等到有一天需要回復舊有資料的場合時,才發現找不到過去某段期間的備份資料,造成無法彌補之後果。   2.    改善: 2.1 設計一執行檔,功能為打開備
由於電腦出問題,所以嶄新的業務暫時恢復紙本作業。陽曜德和工程師們連夜加班,好不容易才將電腦全部重灌完畢。但維修電腦可不是重灌就能解決的事,工程師們還必須從備用伺服器上將資料還原!有些紀錄甚至會被放棄還原——例如兩年前訪客名單。這部份陽曜德就幫不上忙了,他不知道備份伺服器是怎麼運作的,也沒興趣再入侵一
Thumbnail
在選大學校系,甚至是選擇職業的時候,大家通常都會關注產業前景跟工作報酬,但卻忽略了最重要的一點,你的熱情在何處?如果沒有熱情,連持續學習該領域都顯得困難,又要怎麼做到在產業中競爭呢?不是別人做的工作看上去好就是好,自己過得好與不好只有自己知道,也無須和他人比較。
Thumbnail
在企業IT環境,系統和數據的備份的重要性相信是不用解說,亦不用懷疑的。 但很時時候,企業忽略的並不是備份,而是Drill test的重要性。
Thumbnail
對理工出身的我而言,「人的感受」真的很難處理,因為你控制不了對方的感覺。 你想嘛!工程師寫程式,寫錯了,改一改重新編譯,我們沒有必要去對程式碼噓寒問暖呀~