隨著企業(yè)以數(shù)據(jù)為中心的文化,以做出決策和規(guī)劃,數(shù)據(jù)科學家對全球企業(yè)的重要性日益增加。但是企業(yè)無法足夠快地聘請數(shù)據(jù)科學家,因為合格候選人仍然非常有限。
為了應對數(shù)據(jù)科學家短缺的問題,企業(yè)正在采取各種方法,以從他們可以找到和保留的少數(shù)數(shù)據(jù)專業(yè)人員中獲取最大的收益。
自動化
數(shù)據(jù)科學家完成的很多工作側重于數(shù)據(jù)管理和操作任務,例如識別數(shù)據(jù)源、合并數(shù)據(jù)集和驗證數(shù)據(jù)質量。這些任務并不是通常聘用數(shù)據(jù)科學家的目的,他們應該負責高價值工作。隨著更多的自動化工作進入企業(yè),這種情況正在改變。
自動機器學習(ML)軟件公司DotData首席執(zhí)行官兼創(chuàng)始人Ryohei Fujimaki說:“通過自動化,模型開發(fā)以及模型操作得到極大簡化。新的數(shù)據(jù)科學自動化平臺將使企業(yè)只需付出最小的努力,便可在生產中部署、操作和維護數(shù)據(jù)科學流程,從而幫助企業(yè)最大程度地利用其AI和ML投資以及當前的數(shù)據(jù)團隊。”
自動化數(shù)據(jù)工程軟件公司AtScale創(chuàng)始人兼首席技術官Matthew Baird表示,在數(shù)據(jù)科學自動化領域,最有前景的發(fā)展是在自主數(shù)據(jù)工程領域,該領域實現(xiàn)了數(shù)據(jù)管理和處理任務的自動化。
Baird 稱:“這些進步是以‘實時’數(shù)據(jù)工程的形式出現(xiàn),如果具備所有知識并完整地輸入數(shù)據(jù),自動化就可以像完美的數(shù)據(jù)工程團隊一樣工作。這包括了解如何最好地利用各種數(shù)據(jù)庫的基礎數(shù)據(jù)結構,其獨特的網絡特性、數(shù)據(jù)位置、本機安全設置和策略。”
自助服務分析
所有這些額外的數(shù)據(jù)管理和建模自動化功能不僅旨在最大程度地利用高級數(shù)據(jù)科學家,還可以讓公民數(shù)據(jù)科學家利用數(shù)據(jù)資源。通過自助服務分析擴展數(shù)據(jù)探索是解決數(shù)據(jù)科學家短缺的另一種流行方法。
Baird 稱:“自主數(shù)據(jù)工程技術的進步,再加上自助服務分析帶來很多公民分析人員,可讓寶貴的數(shù)據(jù)科學和數(shù)據(jù)工程資源專注于更高價值的活動,例如構建下一代機器學習或人工智能模型。”
創(chuàng)建跨職能團隊
同時,企業(yè)開始看到自助服務分析工具和自動化的局限性。
深度學習軟件公司Pathmind創(chuàng)始人兼首席執(zhí)行官Chris Nicholson說:“簡化數(shù)據(jù)科學的工具也限制了用戶的靈活性和選擇,這意味著某些需要定制的復雜任務不可能實現(xiàn)。” Nicholson認為,這種現(xiàn)實已導致很多公司探索新的團隊策略,以從有限的數(shù)據(jù)專家中獲取更多信息。
Nicholson說:“很多公司通過建立跨職能的數(shù)據(jù)科學團隊來應對數(shù)據(jù)科學家的短缺問題,這些團隊可以與企業(yè)中的很多業(yè)務部門合作,也可以聘用外部顧問。通常,限制企業(yè)數(shù)據(jù)科學價值的不是數(shù)據(jù)科學家的匱乏,而是企業(yè)收集的數(shù)據(jù)以及企業(yè)如何使人們訪問和處理數(shù)據(jù)。”
Nicholson說,跨職能團隊可以幫助企業(yè)解決因技術和內部政治障礙而造成的零散的數(shù)據(jù)孤島問題,只要正確的利益相關者在同一團隊中共同努力,就可以克服這些障礙。
這也可以緩解一個常見問題,這個問題看起來像數(shù)據(jù)科學家短缺,但其實更基礎,即太多數(shù)據(jù)科學項目看起來難以管理,因為它們沒有通往業(yè)務價值的明確途徑。
IT咨詢公司More Than Code首席顧問Sten Vesterli說:“太多的項目令人難以置信,企業(yè)將大量數(shù)據(jù)丟給數(shù)據(jù)科學家,然后說,‘看看你能做什么。’我們已經看到超過80%的數(shù)據(jù)科學項目無法從實驗室轉移到生產環(huán)境中,而企業(yè)需要將其數(shù)據(jù)科學家分配給最高價值的業(yè)務目標。”
更好地定義數(shù)據(jù)科學角色
圖形數(shù)據(jù)庫公司Neo4j的圖形分析和AI程序主管Amy Hodler表示,阻礙有效招聘數(shù)據(jù)科學家的一大問題是,企業(yè)正在使數(shù)據(jù)科學的頭銜和職責變得過于廣泛。
Hodler稱:“這使企業(yè)很難找到合適人選,這意味著新員工很難理解和適應業(yè)務目標。”
她認為,未來一年,很多企業(yè)將開始多樣化與數(shù)據(jù)科學相關的職位,從而創(chuàng)建子類別的工作重點和更加嚴格的工作要求。
內部培訓
Hodler還認為,企業(yè)將通過對現(xiàn)有員工進行更多內部培訓–這些員工表現(xiàn)出任何潛力或希望轉向數(shù)據(jù)科學崗位,以應對數(shù)據(jù)科學家的短缺。她說,企業(yè)必須戰(zhàn)略性地培養(yǎng)潛在數(shù)據(jù)科學家的特定技能。
Hodler說:“企業(yè)必須以長遠的眼光來清晰地評估和定義所需的技能,不僅需要考慮當今炙手可熱的工具/方法,而且還要投資可在未來數(shù)年內建立的核心概念。在未來幾年內,初級和高級數(shù)據(jù)科學家配對將對發(fā)展和保留這些員工變得至關重要。”
-
數(shù)據(jù)庫
+關注
關注
7文章
3926瀏覽量
66184 -
數(shù)據(jù)結構
+關注
關注
3文章
573瀏覽量
40738
發(fā)布評論請先 登錄
地物光譜儀如何幫助科學家研究植被和土壤?

云天勵飛董事長陳寧當選深圳市青年科學家協(xié)會第十屆會長

我國科學家制備出可控手性石墨烯卷
NVIDIA RAPIDS cuDF如何賦能AI加速數(shù)據(jù)科學
深開鴻亮相“小小科學家”品牌發(fā)布暨科學探索研學營開營活動

AI 推動未來科學 晶泰科技共襄未來科學大獎周

西湖大學:科學家+AI,科研新范式的樣本

華為自動駕駛科學家陳亦倫投身具身智能創(chuàng)業(yè)
螞蟻集團收購邊塞科技,吳翼出任強化學習實驗室首席科學家
AI for Science:人工智能驅動科學創(chuàng)新》第4章-AI與生命科學讀后感
《AI for Science:人工智能驅動科學創(chuàng)新》第二章AI for Science的技術支撐學習心得
《AI for Science:人工智能驅動科學創(chuàng)新》第一章人工智能驅動的科學創(chuàng)新學習心得
科學家開發(fā)出首臺可見光飛秒光纖激光器

受人眼啟發(fā)!科學家開發(fā)出新型改良相機

評論