在工作崗位上,大數(shù)據(jù)工程師需要基于Hadoop,Spark等構(gòu)建數(shù)據(jù)分析平臺(tái),進(jìn)行設(shè)計(jì)、開發(fā)分布式計(jì)算業(yè)務(wù)。負(fù)責(zé)大數(shù)據(jù)平臺(tái)(Hadoop,HBase,Spark等)集群環(huán)境的搭建,性能調(diào)優(yōu)和日常維護(hù)。負(fù)責(zé)數(shù)據(jù)倉庫設(shè)計(jì),數(shù)據(jù)ETL的設(shè)計(jì)、開發(fā)和性能優(yōu)化。參與構(gòu)建大數(shù)據(jù)平臺(tái),依托大數(shù)據(jù)技術(shù)建設(shè)用戶畫像。
除開以上是需要負(fù)責(zé)處理的工作,還需要負(fù)責(zé)分析新的數(shù)據(jù)需求,完成數(shù)據(jù)處理的設(shè)計(jì)(文檔)和實(shí)現(xiàn)。對(duì)大數(shù)據(jù)應(yīng)用產(chǎn)品設(shè)計(jì)及解決方案設(shè)計(jì),通過大數(shù)據(jù)挖掘用戶需求。負(fù)責(zé)數(shù)據(jù)處理程序設(shè)計(jì)框架改善,數(shù)據(jù)處理性能優(yōu)化, 系統(tǒng)數(shù)據(jù)處理的能力提高等等。
能夠純熟處理以上工作的大數(shù)據(jù)工程師,月薪輕松突破15K不難。當(dāng)下行業(yè)極缺人才,一名合格的大數(shù)據(jù)工程師是諸多企業(yè)爭搶的對(duì)象,并且開出來的薪資都不菲。以北京為例,大數(shù)據(jù)工程師的起步薪資,都是10000起,隨著工作能力的提升,薪資待遇也會(huì)跟著提升。
-
工程師
+關(guān)注
關(guān)注
59文章
1587瀏覽量
69204 -
大數(shù)據(jù)
+關(guān)注
關(guān)注
64文章
8949瀏覽量
139449
發(fā)布評(píng)論請(qǐng)先 登錄

(仰天長嘯)為什么受傷的總是硬件工程師...#MDD#MDD辰達(dá)半導(dǎo)體 #電子工程師




硬件工程師的終極幻想:焊板子焊上人生巔峰!#半導(dǎo)體器件 #硬件工程師 #MDD辰達(dá)半導(dǎo)體


不同時(shí)期的硬件工程師,最怕發(fā)生的事 #電子工程師 #硬件工程師 #內(nèi)容過于真實(shí) #YXC晶振 #揚(yáng)興科技
為什么嵌入式驅(qū)動(dòng)開發(fā)工程師可以拿高薪?

當(dāng)硬件工程師穿越到霸總劇: 以他性格肯定忍不到第二集? #硬件工程師 #電路設(shè)計(jì) #晶振 #揚(yáng)興科技

當(dāng)你的工程師朋友失聯(lián)時(shí),別氣,ta真的是在忙工作 #搞笑 #電子愛好者 #硬件工程師 #晶振 #揚(yáng)興科技

硬件工程師VS軟件工程師|硬件工程師看到這都淚目了!#硬件設(shè)計(jì) #硬件工程師 #電子工程師 #軟件工程師
FPGA算法工程師、邏輯工程師、原型驗(yàn)證工程師有什么區(qū)別?


評(píng)論