數據科學在過去十年里蓬勃發展，改變了我們的商業模式，同時對于新一代的年輕人來說，提供了一個未來的職業方向。但在數據科學快速發展的同時，人們對它的理解也在逐步演變，這導致了不同的人對于如何更好地從數據中獲取洞察有了不同的觀點。對于我來說，數據科學的發展重塑了我的職業生涯，接下來我想深入研究數據科學是什么、數據科學的研究工作是什么以及數據科學家是誰等問題。我查閱了大量的文獻，將數據科學和數據科學家的各種研究和分析關聯匯總到一起，從而試圖來回答了這些問題。我在一篇題為 “Passing the Data Baton: A Retrospective Analysis on Data Science Work and Workers” 的研究出版物中說明了以上結果。

這項研究的部分動機是作為未來研究和開發的基礎，這樣我可能可以找到一個可視化分析工具還未滿足其需求的領域。而另一個動機是，我希望對十多年前我剛開始學習計算機科學時還不存在的這個領域進行自我反思和回顧。在這篇文章中，我總結了這篇研究論文的幾個關鍵收獲，并分享了這些發現將如何幫助我們創建數據科學領域的下一代數據可視化工具。

什么是數據科學？

數據科學對不同的人來說是不一樣的。對某些人來說，數據科學并不是什么新鮮事，只是統計技術的實際應用，并且已經存在了很長一段時間。對其他人來說，數據科學不僅需要統計方法的知識，而且還需要計算技術使這些方法得到應用。例如，一個數據科學家僅僅理解線性回歸是不夠的，他們還需要知道如何在大規模的數據中應用線性回歸——這不是傳統統計學教育的一部分。盡管如此，即使是那些認為數據科學不僅僅是應用統計學的人，也可能并不認為它是一件新事物。收集和分析數據的做法，長期以來一直是科學研究的一部分，例如生物學或物理學；許多人認為，數據科學只是經驗科學中對已經存在的研究的延伸。

但其實還有第三種觀點，即數據科學確實是一件新的事物，既不同于統計學，也不同于科學家在研究原子和基因時使用的方法。數據科學將統計學、計算機科學以及其他必要的學科專業知識結合起來，帶來了數據科學所獨有的、由數據科學家所應對的全新挑戰。此外，數據科學家開展的工作與其他類型的數據分析不同，它需要更廣泛的跨學科技能。我們和其他人的研究都認為數據科學確實是一件全新的、不同的事物，基于這點，我們創建了一個關于數據科學的定義，作為我們工作的基礎:

數據科學是一個跨學科領域，旨在通過統計和計算技術的結構化應用，從現實世界的數據中得到新的見解。 這一定義很重要，因為它幫助我們了解數據科學工作者面臨的挑戰和未滿足的需求，它們主要來自于處理真實數據的挑戰（而不是模擬數據），以及大規模應用統計和計算方法的挑戰。

什么是數據科學工作？

重要的是，數據科學的有效定義縮小了研究范圍。我們并沒有包含人們可能希望進行研究的所有類型的數據分析，而是仔細研究那些數據科學家進行研究的分析類型。這種區別很重要，因為實驗物理學家分析數據所采取的具體步驟與數據科學家可能采取的分析步驟不同，盡管它們有共同點。這就引出了一個重要的后續問題：究竟什么是數據科學的研究工作？ 有好幾個行業標準來分解數據科學的研究工作。第一種是 KDD（數據發現中的知識）方法，隨著時間的推移，其他人會對該方法進行修改和擴展?；谶@些推論，以及采訪數據科學家，我們創建了一個框架，其中包括四個高階過程（準備、分析、部署和通信）和 14 個低階過程。使用紅色筆劃輪廓，我們還強調了數據可視化在數據科學工作中已經發揮突出作用的具體領域。在我們的研究文章中，我們提供了這些過程的詳細定義和示例。

誰是數據科學工作者？

我們在與數據科學家進行的 12 項深入研究中發現了 9 個數據科學角色。這些年來，我聽到了許多關于數據科學家的不同看法。我喜歡的一個例子是，數據科學家是“比統計學家更擅長軟件工程，比軟件工程師更擅長統計學” 的人。我最近聽到的一個直白的說法是，數據科學家是“西海岸的統計學家”。

然而，當我們深入研究現有的數據科學家的研究時，我們沒想到發現了一個重要且一致的特征，即 “數據科學家” 的多樣性以及它們在特定數據科學過程中的作用如何變化。您可能已經注意到數據工程師的崛起，例如，作為一個獨特但仍然相鄰的數據科學角色。隨著數據科學工作的復雜性的增加，數據科學家變得更專業，往往從事數據科學研究工作的具體方面。Harris 等人的訪談早在 2012 年就已經確定了這一趨勢，這種趨勢只是隨著時間的推移而加速。他們敏銳地發現，數據科學角色之間的這種多樣性導致了 “數據科學家和尋求幫助的人之間的交流不暢”。

我們根據 Harris 的研究結果，對 12 項研究進行了調查，共有數千名被認定為數據科學家的個體。通過對這些研究的分析，我們能夠識別出 9 個不同的數據角色。這些人有不同的技能和背景，我們以統計、計算機科學和領域專業知識為軸心來說明。我們還將以人為中心的設計納入了我們對數據科學技能的描述，因為考慮到數據產品的影響，就像面部識別應用程序一樣，越來越重要。我們要強調的是，這些角色不是絕對的范疇，它們的邊界是不固定的，同時這些角色的技術技能也符合類似的規律。相反，提出這些角色類別的目的是提供一個指導，從而幫助研究人員對于正在交談的人以及他們的背景有一個直觀的認識。

這將如何改變我們創建可視化

和數據分析工具的方式？

當然，最重要的是我們對數據科學的定義以及我們的數據科學工作框架和工作人員如何幫助我們構建更好的數據可視化工具。首先也是最重要的一點是，它有助于提供一個清晰的標準，從而明確了數據科學研究工作的多樣性和對應的工作人員。我們已經使用這個框架創建了更清晰的標準來分解數據科學中的 Tableau 客戶體驗。我們可以更精確地確定他們正試圖做什么，并可以就這些過程提出更深入的問題。

已知 “數據科學家” 這個角色本身包含了大量的多樣性，我們可以通過將與我們交談的個人歸類到九個數據科學的角色，從而更好地確定誰在執行這項工作。這樣的分類使得我們更容易理解可視化系統需要支持的任務以及在什么級別上支持這些任務。例如，技術分析員和 ML/AI 工程師是我們描述的兩個數據科學角色，他們都可以參與模型構建的共同任務，但需求截然不同；如果我們忽略這些差異，我們就有可能為這兩個角色創建錯誤的工具。

但也許對我來說最重要的是，這個框架還幫助我思考當前可視化分析工具生態系統中缺少的東西。我得出的一個令人擔憂的結論是，現有工具對可視化機器學習模型的關注范圍很窄，缺乏支持數據科學研究工作的其他關鍵方面的工具，如數據準備、部署或通信。這種工具的缺乏不僅增加了數據科學研究工作的開銷，還使得數據科學家無論擔任什么角色，都更難讓他們的工作影響到組織的決策和實踐。這項關于數據科學工作和工作者的研究幫助我面對以上挑戰，同時為構建更好的工具來幫助人們查看和理解他們的數據提供了機會。

原文標題：數據科學的十年回顧與可視化工具的未來

文章出處：【微信公眾號：Tableau社區】歡迎添加關注！文章轉載請注明出處。

責任編輯：haq