2024年高級(jí)大數(shù)據(jù)工程師崗位職責(zé)5篇

2024年高級(jí)大數(shù)據(jù)工程師崗位職責(zé)5篇

目錄

第1篇高級(jí)大數(shù)據(jù)研發(fā)工程師（數(shù)據(jù)可視化）職位描述與崗位職責(zé)任職要求

第2篇健康科技中心-高級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求

第3篇高級(jí)大數(shù)據(jù)工程師職位描述與崗位職責(zé)任職要求

第4篇高級(jí)大數(shù)據(jù)產(chǎn)品研發(fā)工程師職位描述與崗位職責(zé)任職要求

第5篇高級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求

高級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1.基于公司大數(shù)據(jù)產(chǎn)品進(jìn)行數(shù)據(jù)開(kāi)發(fā)，包括數(shù)據(jù)的采集，清洗，預(yù)處理，存儲(chǔ)，建模，分析挖掘等

2.根據(jù)業(yè)務(wù)用戶(hù)需要分析數(shù)據(jù)，提供數(shù)據(jù)支持

3.參與公司大數(shù)據(jù)產(chǎn)品的運(yùn)維和監(jiān)控，保障數(shù)據(jù)質(zhì)量和服務(wù)穩(wěn)定性

任職要求：

1.具備本科以上學(xué)歷，計(jì)算機(jī)，軟件以及相關(guān)專(zhuān)業(yè)，5年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)

2.熟悉數(shù)據(jù)倉(cāng)庫(kù)維度建模，并能根據(jù)客戶(hù)需求進(jìn)行數(shù)據(jù)開(kāi)發(fā)，向模型更新數(shù)據(jù)

3.使用過(guò)至少一種以上的etl工具

4.熟練掌握java，對(duì)hadoop相關(guān)的技術(shù)和組件(hdfs，mr，hbase，hive，spark，storm，kafka等）有全面深入了解

5.熟練掌握shell或者python中的一種

6.具備spark開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先

7.具備實(shí)時(shí)計(jì)算(kafka+storm/sparkstreaming)經(jīng)驗(yàn)者優(yōu)先

8.具備數(shù)據(jù)分析和數(shù)據(jù)挖掘方面經(jīng)驗(yàn)者優(yōu)先

健康科技中心-高級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述：

職位描述：

1.基于hadoop生態(tài)系統(tǒng)進(jìn)行大數(shù)據(jù)平臺(tái)建設(shè)；

2.負(fù)責(zé)各業(yè)務(wù)條線相關(guān)指標(biāo)數(shù)據(jù)的數(shù)據(jù)建模

3.負(fù)責(zé)基于sqoop，hive、spark、sparksql、mysql進(jìn)行大數(shù)據(jù)開(kāi)發(fā)

4.負(fù)責(zé)離線運(yùn)算、實(shí)時(shí)計(jì)算平臺(tái)項(xiàng)目的設(shè)計(jì)、開(kāi)發(fā)及運(yùn)維

5.負(fù)責(zé)對(duì)數(shù)據(jù)平臺(tái)進(jìn)行性能調(diào)優(yōu)

任職要求：

1.統(tǒng)招本科或以上學(xué)歷，6年以上大數(shù)據(jù)開(kāi)發(fā)工作經(jīng)驗(yàn)；

2.熟練掌握shell、python開(kāi)發(fā)語(yǔ)言；

3.熟練掌握hadoop、hive、hbase、spark、sparksql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理，有相關(guān)的調(diào)優(yōu)、運(yùn)維、開(kāi)發(fā)經(jīng)驗(yàn)；

4.熟練掌握mysql數(shù)據(jù)庫(kù)集群；

5.精通主流etl開(kāi)發(fā)工具，如：informatica、dataservices、kettle;精通主流調(diào)度工具，如：azkaban，oozie；

6.有數(shù)據(jù)倉(cāng)庫(kù)、分析系統(tǒng)、用戶(hù)畫(huà)像等產(chǎn)品開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先；

7.有較強(qiáng)的數(shù)據(jù)和業(yè)務(wù)結(jié)合能力；

8.有醫(yī)療或者大健康背景優(yōu)先；

9.有較強(qiáng)的獨(dú)立、主動(dòng)的學(xué)習(xí)能力，良好的溝通表達(dá)能力。

高級(jí)大數(shù)據(jù)研發(fā)工程師（數(shù)據(jù)可視化）職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1.負(fù)責(zé)全公司的數(shù)據(jù)平臺(tái)數(shù)據(jù)可視化研發(fā)工作

2.獨(dú)立完成數(shù)據(jù)可視化研發(fā)工作

任職要求：

1.計(jì)算機(jī)、電子通信、數(shù)學(xué)、統(tǒng)計(jì)或者相關(guān)專(zhuān)業(yè)本科及以上學(xué)歷

2.熟練掌握java/python中的一種語(yǔ)言

3.熟悉數(shù)據(jù)可視化開(kāi)發(fā)，熟悉echarts應(yīng)用開(kāi)發(fā)的優(yōu)先

4.熟悉web開(kāi)發(fā)，熟悉html，js，css

5.熟悉quickbi的優(yōu)先

6.具備良好的團(tuán)隊(duì)合作精神，工作有激情

7.對(duì)數(shù)據(jù)敏感，有產(chǎn)品思維的優(yōu)先

高級(jí)大數(shù)據(jù)產(chǎn)品研發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé):

1.參與公司數(shù)據(jù)開(kāi)發(fā)平臺(tái)、bi產(chǎn)品等大數(shù)據(jù)產(chǎn)品的設(shè)計(jì)和開(kāi)發(fā);

2.負(fù)責(zé)數(shù)據(jù)開(kāi)發(fā)平臺(tái)、bi產(chǎn)品等大數(shù)據(jù)產(chǎn)品的部署和維護(hù)，保證其穩(wěn)定和可靠;

3.關(guān)注和參與大數(shù)據(jù)方向開(kāi)源產(chǎn)品的技術(shù)動(dòng)態(tài)與演進(jìn)，推動(dòng)產(chǎn)品與技術(shù)架構(gòu)持續(xù)更新;

任職要求:

1.計(jì)算機(jī)相關(guān)專(zhuān)業(yè)，本科及以上學(xué)歷，5年以上軟件開(kāi)發(fā)經(jīng)驗(yàn)，3年以上互聯(lián)網(wǎng)產(chǎn)品或分布式系統(tǒng)開(kāi)發(fā)設(shè)計(jì)經(jīng)驗(yàn);

2.精通java，python，scala等一種或幾種編程語(yǔ)言，并熟悉linux操作系統(tǒng)及bashshell編程;

3.有hadoop/spark/hive/presto/hbase/elasticsearch/kafka等使用經(jīng)驗(yàn)，并熟悉上述常用的分布式系統(tǒng)架構(gòu)設(shè)計(jì)和原理;

4.熟悉微服務(wù)框架及相關(guān)技術(shù)，如dubbo，springcloud等;

5.熟悉mysql、redis，并了解或接觸過(guò)其他數(shù)據(jù)庫(kù)如oracle，sqlserver，postgresql，mongodb等;

6.了解容器技術(shù)，如docker，kubernetes;

7.具有一定的軟件設(shè)計(jì)能力，熱愛(ài)大數(shù)據(jù)和技術(shù)，相信技術(shù)改變世界，學(xué)習(xí)能力強(qiáng)，認(rèn)同數(shù)據(jù)價(jià)值，有面向業(yè)務(wù)的思維，較強(qiáng)的自主學(xué)習(xí)能力和英文技術(shù)文檔閱讀能力;

8.良好的溝通能力、團(tuán)隊(duì)精神及服務(wù)意識(shí)，勇于接受挑戰(zhàn)，能承受較大的工作壓力;

9.有生產(chǎn)環(huán)境快速trouble-shooting的經(jīng)驗(yàn)和能力者優(yōu)先;

10.有olap，多維度數(shù)據(jù)分析經(jīng)驗(yàn)優(yōu)先，有對(duì)數(shù)據(jù)倉(cāng)庫(kù)有較強(qiáng)的理論基礎(chǔ)和理解者優(yōu)先;

高級(jí)大數(shù)據(jù)工程師職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé):

1、參與大數(shù)據(jù)開(kāi)放平臺(tái)基礎(chǔ)能力建設(shè)，承擔(dān)系統(tǒng)架構(gòu)、組件開(kāi)發(fā)、方案驗(yàn)證等工作；

2、參與構(gòu)建大數(shù)據(jù)系列產(chǎn)品，包括但不限于用戶(hù)畫(huà)像、用戶(hù)增長(zhǎng)與用戶(hù)經(jīng)營(yíng)、數(shù)據(jù)分析挖掘、實(shí)時(shí)計(jì)算、數(shù)據(jù)分發(fā)、機(jī)器學(xué)習(xí)平臺(tái)、風(fēng)控反欺詐等產(chǎn)品線；

任職要求：

1、統(tǒng)招本科或以上學(xué)歷，5年以上大數(shù)據(jù)開(kāi)發(fā)工作經(jīng)驗(yàn)；

2、扎實(shí)的java基礎(chǔ)，能熟練使用java進(jìn)行軟件功能開(kāi)發(fā)；

3、熟練掌握基于hadoop生態(tài)的大數(shù)據(jù)開(kāi)發(fā)工具，包括hive、spark、hbase、sqoop、es、impala、flink、storm等，有實(shí)時(shí)系統(tǒng)開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)