歡迎光臨管理者范文網(wǎng)
當(dāng)前位置:管理者范文網(wǎng) > 安全管理 > 崗位職責(zé) > 工程崗位職責(zé)

高級(jí)大數(shù)據(jù)工程師崗位職責(zé)5篇

更新時(shí)間:2024-11-20 查看人數(shù):68

高級(jí)大數(shù)據(jù)工程師崗位職責(zé)

第1篇 高級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述:

崗位職責(zé):

1. 基于公司大數(shù)據(jù)產(chǎn)品進(jìn)行數(shù)據(jù)開(kāi)發(fā),包括數(shù)據(jù)的采集,清洗,預(yù)處理,存儲(chǔ),建模,分析挖掘等

2. 根據(jù)業(yè)務(wù)用戶需要分析數(shù)據(jù),提供數(shù)據(jù)支持

3. 參與公司大數(shù)據(jù)產(chǎn)品的運(yùn)維和監(jiān)控,保障數(shù)據(jù)質(zhì)量和服務(wù)穩(wěn)定性

任職要求:

1. 具備本科以上學(xué)歷, 計(jì)算機(jī), 軟件以及相關(guān)專業(yè), 5年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)

2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)維度建模, 并能根據(jù)客戶需求進(jìn)行數(shù)據(jù)開(kāi)發(fā), 向模型更新數(shù)據(jù)

3. 使用過(guò)至少一種以上的etl工具

4. 熟練掌握java, 對(duì)hadoop相關(guān)的技術(shù)和組件(hdfs, mr, hbase, hive, spark, storm, kafka等)有全面深入了解

5. 熟練掌握shell或者python中的一種

6. 具備spark開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先

7. 具備實(shí)時(shí)計(jì)算(kafka+storm/spark streaming) 經(jīng)驗(yàn)者優(yōu)先

8. 具備數(shù)據(jù)分析和數(shù)據(jù)挖掘方面經(jīng)驗(yàn)者優(yōu)先

第2篇 健康科技中心-高級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述:

職位描述:

1. 基于hadoop生態(tài)系統(tǒng)進(jìn)行大數(shù)據(jù)平臺(tái)建設(shè);

2. 負(fù)責(zé)各業(yè)務(wù)條線相關(guān)指標(biāo)數(shù)據(jù)的數(shù)據(jù)建模

3. 負(fù)責(zé)基于sqoop,hive、spark、sparksql、mysql進(jìn)行大數(shù)據(jù)開(kāi)發(fā)

4. 負(fù)責(zé)離線運(yùn)算、實(shí)時(shí)計(jì)算平臺(tái)項(xiàng)目的設(shè)計(jì)、開(kāi)發(fā)及運(yùn)維

5. 負(fù)責(zé)對(duì)數(shù)據(jù)平臺(tái)進(jìn)行性能調(diào)優(yōu)

任職要求:

1.統(tǒng)招本科或以上學(xué)歷,6年以上大數(shù)據(jù)開(kāi)發(fā)工作經(jīng)驗(yàn);

2.熟練掌握shell、python開(kāi)發(fā)語(yǔ)言;

3.熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理,有相關(guān)的調(diào)優(yōu)、運(yùn)維、開(kāi)發(fā)經(jīng)驗(yàn);

4.熟練掌握mysql數(shù)據(jù)庫(kù)集群;

5. 精通主流etl開(kāi)發(fā)工具,如:informatica、data services、kettle;精通主流調(diào)度工具,如:azkaban, oozie;

6.有數(shù)據(jù)倉(cāng)庫(kù)、分析系統(tǒng)、用戶畫(huà)像等產(chǎn)品開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先;

7.有較強(qiáng)的數(shù)據(jù)和業(yè)務(wù)結(jié)合能力;

8.有醫(yī)療或者大健康背景優(yōu)先;

9.有較強(qiáng)的獨(dú)立、主動(dòng)的學(xué)習(xí)能力,良好的溝通表達(dá)能力。

第3篇 高級(jí)大數(shù)據(jù)研發(fā)工程師(數(shù)據(jù)可視化)職位描述與崗位職責(zé)任職要求

職位描述:

崗位職責(zé):

1.負(fù)責(zé)全公司的數(shù)據(jù)平臺(tái)數(shù)據(jù)可視化研發(fā)工作

2.獨(dú)立完成數(shù)據(jù)可視化研發(fā)工作

任職要求:

1.計(jì)算機(jī)、電子通信、數(shù)學(xué)、統(tǒng)計(jì)或者相關(guān)專業(yè)本科及以上學(xué)歷

2.熟練掌握java/python中的一種語(yǔ)言

3.熟悉數(shù)據(jù)可視化開(kāi)發(fā),熟悉echarts應(yīng)用開(kāi)發(fā)的優(yōu)先

4.熟悉web開(kāi)發(fā),熟悉html,js,css

5.熟悉quick bi的優(yōu)先

6.具備良好的團(tuán)隊(duì)合作精神,工作有激情

7.對(duì)數(shù)據(jù)敏感,有產(chǎn)品思維的優(yōu)先

第4篇 高級(jí)大數(shù)據(jù)產(chǎn)品研發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述:

崗位職責(zé):

1. 參與公司數(shù)據(jù)開(kāi)發(fā)平臺(tái)、bi產(chǎn)品等大數(shù)據(jù)產(chǎn)品的設(shè)計(jì)和開(kāi)發(fā);

2. 負(fù)責(zé)數(shù)據(jù)開(kāi)發(fā)平臺(tái)、bi產(chǎn)品等大數(shù)據(jù)產(chǎn)品的部署和維護(hù),保證其穩(wěn)定和可靠;

3. 關(guān)注和參與大數(shù)據(jù)方向開(kāi)源產(chǎn)品的技術(shù)動(dòng)態(tài)與演進(jìn),推動(dòng)產(chǎn)品與技術(shù)架構(gòu)持續(xù)更新;

任職要求:

1. 計(jì)算機(jī)相關(guān)專業(yè),本科及以上學(xué)歷,5年以上軟件開(kāi)發(fā)經(jīng)驗(yàn),3年以上互聯(lián)網(wǎng)產(chǎn)品或分布式系統(tǒng)開(kāi)發(fā)設(shè)計(jì)經(jīng)驗(yàn);

2. 精通java, python, scala等一種或幾種編程語(yǔ)言, 并熟悉linu_操作系統(tǒng)及bash shell編程;

3. 有hadoop/spark/hive/presto/hbase/elasticsearch/kafka等使用經(jīng)驗(yàn), 并熟悉上述常用的分布式系統(tǒng)架構(gòu)設(shè)計(jì)和原理;

4. 熟悉微服務(wù)框架及相關(guān)技術(shù), 如dubbo, springcloud等;

5. 熟悉mysql、redis, 并了解或接觸過(guò)其他數(shù)據(jù)庫(kù)如 oracle, sqlserver, postgresql, mongodb等;

6. 了解容器技術(shù), 如docker, kubernetes;

7. 具有一定的軟件設(shè)計(jì)能力, 熱愛(ài)大數(shù)據(jù)和技術(shù),相信技術(shù)改變世界,學(xué)習(xí)能力強(qiáng),認(rèn)同數(shù)據(jù)價(jià)值,有面向業(yè)務(wù)的思維, 較強(qiáng)的自主學(xué)習(xí)能力和英文技術(shù)文檔閱讀能力;

8. 良好的溝通能力、團(tuán)隊(duì)精神及服務(wù)意識(shí),勇于接受挑戰(zhàn),能承受較大的工作壓力;

9. 有生產(chǎn)環(huán)境快速trouble-shooting的經(jīng)驗(yàn)和能力者優(yōu)先;

10. 有olap,多維度數(shù)據(jù)分析經(jīng)驗(yàn)優(yōu)先,有對(duì)數(shù)據(jù)倉(cāng)庫(kù)有較強(qiáng)的理論基礎(chǔ)和理解者優(yōu)先;

第5篇 高級(jí)大數(shù)據(jù)工程師職位描述與崗位職責(zé)任職要求

職位描述:

崗位職責(zé):

1、參與大數(shù)據(jù)開(kāi)放平臺(tái)基礎(chǔ)能力建設(shè),承擔(dān)系統(tǒng)架構(gòu)、組件開(kāi)發(fā)、方案驗(yàn)證等工作;

2、參與構(gòu)建大數(shù)據(jù)系列產(chǎn)品,包括但不限于用戶畫(huà)像、用戶增長(zhǎng)與用戶經(jīng)營(yíng)、數(shù)據(jù)分析挖掘、實(shí)時(shí)計(jì)算、數(shù)據(jù)分發(fā)、機(jī)器學(xué)習(xí)平臺(tái)、風(fēng)控反欺詐等產(chǎn)品線;

任職要求:

1、 統(tǒng)招本科或以上學(xué)歷,5年以上大數(shù)據(jù)開(kāi)發(fā)工作經(jīng)驗(yàn);

2、扎實(shí)的java基礎(chǔ),能熟練使用java進(jìn)行軟件功能開(kāi)發(fā);

3、熟練掌握基于hadoop生態(tài)的大數(shù)據(jù)開(kāi)發(fā)工具,包括hive、spark、hbase、sqoop、es、impala、flink、storm等,有實(shí)時(shí)系統(tǒng)開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先;

4、熟悉常用的數(shù)據(jù)挖掘算法,例如聚類(lèi)、回歸、決策樹(shù)等,有過(guò)nlp項(xiàng)目經(jīng)驗(yàn)優(yōu)先;

5、有過(guò)互聯(lián)網(wǎng)公司數(shù)據(jù)倉(cāng)庫(kù)、分析系統(tǒng)、用戶畫(huà)像、廣告平臺(tái)等產(chǎn)品開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先;

6、工作積極主動(dòng),善于合作,敏而好學(xué);

高級(jí)大數(shù)據(jù)工程師崗位職責(zé)5篇

職位描述:崗位職責(zé):1、參與大數(shù)據(jù)開(kāi)放平臺(tái)基礎(chǔ)能力建設(shè),承擔(dān)系統(tǒng)架構(gòu)、組件開(kāi)發(fā)、方案驗(yàn)證等工作;2、參與構(gòu)建大數(shù)據(jù)系列產(chǎn)品,包括但不限于用戶畫(huà)像、用戶增長(zhǎng)與用戶經(jīng)營(yíng)、數(shù)據(jù)分析挖掘、實(shí)時(shí)計(jì)算、數(shù)據(jù)分發(fā)、機(jī)器學(xué)習(xí)平臺(tái)、風(fēng)控反欺詐等產(chǎn)品線;任職要求:1、統(tǒng)招本科或以上學(xué)歷,5年以上大數(shù)據(jù)開(kāi)發(fā)工作經(jīng)驗(yàn);…
推薦度:
點(diǎn)擊下載文檔文檔為doc格式

相關(guān)高級(jí)大數(shù)據(jù)信息

  • 高級(jí)大數(shù)據(jù)工程師崗位職責(zé)5篇
  • 高級(jí)大數(shù)據(jù)工程師崗位職責(zé)5篇68人關(guān)注

    職位描述:崗位職責(zé):1、參與大數(shù)據(jù)開(kāi)放平臺(tái)基礎(chǔ)能力建設(shè),承擔(dān)系統(tǒng)架構(gòu)、組件開(kāi)發(fā)、方案驗(yàn)證等工作;2、參與構(gòu)建大數(shù)據(jù)系列產(chǎn)品,包括但不限于用戶畫(huà)像、用戶增長(zhǎng)與用戶 ...[更多]

高級(jí)大數(shù)據(jù)崗位職責(zé)專題

工程崗位職責(zé)熱門(mén)信息