![]() |
VOOZH | about |
| 摘要:數據科學不是一個具體的職務,而是一種在機構中解決問題的方法。 |
數據科學不是一個具體的職務,而是一種在機構中解決問題的方法。因此,數據科學可以包含多種教育背景、技能、工具、實踐。實際工作中的數據科學家們,背景和技能的跨度很大,很難被一概而論。
寫文章揭密數據科學家,這事幾乎已經發展成了一種產業。
關於數據科學家的困惑很大部分歸咎於:數據科學不是一個具體的職務,而是一種在機構中解決問題的方法。因此,數據科學可以包含多種教育背景、技能、工具、實踐。實際工作中的數據科學家們,背景和技能的跨度很大,很難被一概而論。
相對而言,描述數據科學家的實踐是什麼樣的可能更容易。
簡單地說,數據科學是用數據主導的答案解決實際問題的實踐。實現這個目標的技術可能多種多樣。你會常常聽到數據科學家使用傳統統計學、貝葉斯方法、機器學習、計算工具、行業領域知識來回答問題。
有時數據的規模會非常巨大,需要使用複雜的工具和方法來穿過迷霧,得到隱藏在數據中的清晰結論。但是沒有哪個方法、工作、算式能回答所有問題,所以也很難為數據科學家下定義。
展示可能比陳述更有說服力。就讓我們來走入數據科學家平凡又不平凡的一天。
早晨
早晨的第一件事可能是這一天日程中為數不多的慣例。
我們的團隊在早上進行例會,分享前一天的進展和問題。這和軟體開發的「站立」會議可能有點不同。對我們來說,「進展」既可以是建設了一部分軟體,也可以是閱讀了一篇可以讓我們對手頭問題有更深理解的論文。
數據科學可能在許多方面與大學裡的學術行為不同,但它依然是對科學方法的合理運用。
通常,我們的挑戰是如何把「未知」變成「已知」。不僅如此,還要讓它「可執行」。
這意味著通過分析數據檢驗某個假設,建立測量效果的方法,對這個過程進行疊代,直到最終的研究結果被修正到足夠有用的水平。晨會是一個交流各個試驗進展的機會。上午
現在我們有了各自的任務。是時候做一點實際工作了。這是一天中最有趣的部分。這是我坐下來專注於一個實際問題的時候。
這可能意味著研究處理偶圖的方法,或者寫一些代碼計算高斯超幾何函數。但每個星期面對的問題很少相同。擁有數學、統計、編程的背景對解決這些問題來說很重要,但仍然不夠。成為每種方法的專家是不可能的。下一個問題將需要什麼知識也是無法預知的。
這就是為什麼數據科學家需要不斷學習和無窮的好奇心。
多數情況下,每個新問題需要一種新方法。這些方法不僅對你來說是新的,對整個世界來說也是新的。這是數據科學的挑戰之處和刺激來源。
不確定性不僅是一種統計學的屬性,也是一種生活方式。
午間
數據科學的實踐不止於應用某些算法的技術細節,或是在白板上寫出高深的算式。
歸根結底,我們要解決現實生活中的問題。這意味著理解其他人面對的問題。午間是跟客戶、商業拓展部門、服務部門以及任何對我們客戶和合伙人每天面對的問題有全面了解的人士碰面的好時候。
大數據分析和機器學習的力量如果不能為他人創造便利就沒太大意義。這是數據科學中一個重要的,但是常被忽略的步驟。它決定一個項目最終的成敗。這也是區分數據科學與傳統學術的一點。
把一個業務問題翻譯成一個縝密的研究項目,再把研究結果翻譯成一個實際的解決方案,這需要對業務的深入理解,以及大量的創造力。
閉門造車,沒完沒了做算法調優的數據科學團隊永遠不會成功。的確,有時為了讓一個項目最終交付需要這麼做。但如果這些都不能投入實際應用還有什麼意義?
數據能告訴我們的關於世界的知識與數據本身中間存在一道鴻溝。與一線工作人員保持良好的交流關係,是彌補這一鴻溝的唯一方式。
下午
我們已經捲起袖子,從技術和實際的層面鑽研了問題。是時候退一步,思考一下全局了。
我們常常在下午花些時間詳細討論某個項目的目標,或者探討把一個研究項目變成可交付的形式所需的剩餘步驟。
與產品團隊的密切交流可以確保我們的工作與機構的總體願景/目標保持一致。確保專注於關鍵問題是很重要的。由於我們的工作是解決問題,所以必須確保解決方案行得通。我的意思是,在實際工作中行得通。根據特定業務提供解決方案只是個開始。
我們需要建立可靠的、可重複使用的工具。
這既包括把一個試驗推廣到更多的實用案例,也包括構造一個能夠深入產品的解決方案。
這個環節是我們最像軟體開發者的部分,考慮並編寫一些測試來確保表現、穩定性、擴展性。我們在Umbel的軟體工程團隊負責建立宏大的系統,我們不能扔給他們額外的工作,讓他們為我們收拾爛攤子。
把這些試驗變成軟體的一個功能,唯一的辦法是在項目全程時刻想著這個目標。這也就是為何研究階段不應只包含數學。
我們需要知道我們不僅能解決某個問題,還能現實的限制中構造軟體來解決這個問題。
結束這一天
經歷了所有這些之後,有必要深吸一口氣,看看自己究竟走了多遠。有些日子會比其他日子走的更遠。大多數試驗則以失敗告終。
多數解決方案在最終展示之前需要調整打磨。通常很少有什麼能保證你選擇的路線是對的。開天闢地的過程始終伴隨著不確定性。但這個過程中的每天,你都會學到新東西。這一天的結尾,我們反思我們學到了什麼,並把這有關世界的新知識帶到明天的晨會。
經過足夠的努力,我們最終獲得針對特定問題的直接可行的答案。
我們可以對這個答案充滿自信,因為它由數據嚴謹地支撐。這個時候,我們還是沒有結束代碼的編寫。正如我之前所說,數據科學項目的一個關鍵環節是把最終結果翻譯成有意義、實用的東西。
我們需要把我們學到的東西有效地傳達給不同背景的受眾。最終,我們需要利用數據講一個故事。跟其他環節一樣,這個環節沒有什麼唯一的正確方法。這個環節中我們尋找用圖表把結果可視化的方法,或者在一個平面展示從問題到解答的各個環節,或者僅僅是宣布「好的,我們需要做的事是這樣的。」
這裡的關鍵在於,在結束時,每個人都能理解要做什麼以及為什麼這麼做。
結語
你可能見過網上流傳的那些展示數據科學家需要多少種交叉技能的圖片。
他們會告訴你數據科學家是一個天生就是數學家的軟體工程師,或者一名喜歡在周末把自己消耗的咖啡數量做成的精美可視化項目的MBA。
希望這個有關數據科學家日常的探討能讓你明白這些圖片是怎麼來的。但數據科學不是對某種工作的描述,它是一個過程。的確,你需要上面提到的技能,甚至更多技能來成功實現一個數據科學項目。
不過,不要認為你需要什麼事都一個人完成。數據科學,如同任何其他複雜的努力一樣,是團隊協作。這也就是為什麼你很少看見兩個履歷相同的數據科學家。一個優秀的數據科學團隊應囊括所有這些技能,擁有專家和通才,每個成員都有強烈的好奇心。
如果有某件事情是數據科學家必須擅長的,那就是學習。