在現在的社會生活中,我們每個人都可能會接觸到崗位職責,崗位職責是指一個崗位所需要去完成的工作內容以及應當承擔的責任范圍。那么相關的崗位職責到底是怎么制定的呢?以下是小編幫大家整理的高級大數據工程師崗位職責,僅供參考,希望能夠幫助到大家。
高級大數據工程師崗位職責1
崗位職責:
1、負責全公司的數據平臺數據可視化研發(fā)工作
2、獨立完成數據可視化研發(fā)工作
任職要求:
1、計算機、電子通信、數學、統(tǒng)計或者相關專業(yè)本科及以上學歷
2、熟練掌握java/python中的一種語言
3、熟悉數據可視化開發(fā),熟悉echarts應用開發(fā)的優(yōu)先
4、熟悉web開發(fā),熟悉html,js,css
5、熟悉quick bi的優(yōu)先
6、具備良好的團隊合作精神,工作有激情
7、對數據敏感,有產品思維的優(yōu)先
高級大數據工程師崗位職責2
崗位職責:
1、參與大數據開放平臺基礎能力建設,承擔系統(tǒng)架構、組件開發(fā)、方案驗證等工作;
2、參與構建大數據系列產品,包括但不限于用戶畫像、用戶增長與用戶經營、數據分析挖掘、實時計算、數據分發(fā)、機器學習平臺、風控反欺詐等產品線;
任職要求:
1、統(tǒng)招本科或以上學歷,5年以上大數據開發(fā)工作經驗;
2、扎實的java基礎,能熟練使用java進行軟件功能開發(fā);
3、熟練掌握基于hadoop生態(tài)的大數據開發(fā)工具,包括hive、spark、hbase、sqoop、es、impala、flink、storm等,有實時系統(tǒng)開發(fā)經驗優(yōu)先;
4、熟悉常用的數據挖掘算法,例如聚類、回歸、決策樹等,有過nlp項目經驗優(yōu)先;
5、有過互聯網公司數據倉庫、分析系統(tǒng)、用戶畫像、廣告平臺等產品開發(fā)經驗者優(yōu)先;
6、工作積極主動,善于合作,敏而好學;
高級大數據工程師崗位職責3
崗位職責:
1、參與公司數據開發(fā)平臺、bi產品等大數據產品的設計和開發(fā);
2、負責數據開發(fā)平臺、bi產品等大數據產品的部署和維護,保證其穩(wěn)定和可靠;
3、關注和參與大數據方向開源產品的技術動態(tài)與演進,推動產品與技術架構持續(xù)更新;
任職要求:
1、計算機相關專業(yè),本科及以上學歷,5年以上軟件開發(fā)經驗,3年以上互聯網產品或分布式系統(tǒng)開發(fā)設計經驗;
2、精通java,python,scala等一種或幾種編程語言,并熟悉linux操作系統(tǒng)及bash shell編程;
3、有hadoop/spark/hive/presto/hbase/elasticsearch/kafka等使用經驗,并熟悉上述常用的分布式系統(tǒng)架構設計和原理;
4、熟悉微服務框架及相關技術,如dubbo,springcloud等;
5、熟悉mysql、redis,并了解或接觸過其他數據庫如oracle,sqlserver,postgresql,mongodb等;
6、了解容器技術,如docker,kubernetes;
7、具有一定的軟件設計能力,熱愛大數據和技術,相信技術改變世界,學習能力強,認同數據價值,有面向業(yè)務的思維,較強的自主學習能力和英文技術文檔閱讀能力;
8、良好的溝通能力、團隊精神及服務意識,勇于接受挑戰(zhàn),能承受較大的工作壓力;
9、有生產環(huán)境快速trouble—shooting的經驗和能力者優(yōu)先;
10、有olap,多維度數據分析經驗優(yōu)先,有對數據倉庫有較強的理論基礎和理解者優(yōu)先;
高級大數據工程師崗位職責4
職位描述:
1、基于hadoop生態(tài)系統(tǒng)進行大數據平臺建設;
2、負責各業(yè)務條線相關指標數據的數據建模
3、負責基于sqoop,hive、spark、sparksql、mysql進行大數據開發(fā)
4、負責離線運算、實時計算平臺項目的設計、開發(fā)及運維
5、負責對數據平臺進行性能調優(yōu)
任職要求:
1、統(tǒng)招本科或以上學歷,6年以上大數據開發(fā)工作經驗;
2、熟練掌握shell、python開發(fā)語言;
3、熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理,有相關的`調優(yōu)、運維、開發(fā)經驗;
4、熟練掌握mysql數據庫集群;
5、精通主流etl開發(fā)工具,如:informatica、data services、kettle;精通主流調度工具,如:azkaban,oozie;
6、有數據倉庫、分析系統(tǒng)、用戶畫像等產品開發(fā)經驗者優(yōu)先;
7、有較強的數據和業(yè)務結合能力;
8、有醫(yī)療或者大健康背景優(yōu)先;
9、有較強的獨立、主動的學習能力,良好的溝通表達能力。
高級大數據工程師崗位職責5
崗位職責:
1、基于公司大數據產品進行數據開發(fā),包括數據的采集,清洗,預處理,存儲,建模,分析挖掘等
2、根據業(yè)務用戶需要分析數據,提供數據支持
3、參與公司大數據產品的運維和監(jiān)控,保障數據質量和服務穩(wěn)定性
任職要求:
1、具備本科以上學歷,計算機,軟件以及相關專業(yè),5年以上大數據開發(fā)經驗
2、熟悉數據倉庫維度建模,并能根據客戶需求進行數據開發(fā),向模型更新數據
3、使用過至少一種以上的etl工具
4、熟練掌握java,對hadoop相關的技術和組件(hdfs,mr,hbase,hive,spark,storm,kafka等)有全面深入了解
5、熟練掌握shell或者python中的一種
6、具備spark開發(fā)經驗者優(yōu)先
7、具備實時計算(kafka+storm/spark streaming)經驗者優(yōu)先
8、具備數據分析和數據挖掘方面經驗者優(yōu)先
【高級大數據工程師崗位職責】相關文章:
高級數據工程師崗位職責描述11-28
數據挖掘工程師崗位職責06-04
高級數據分析師崗位職責12-03
數據挖掘工程師工作的崗位職責11-29
數據中心工程師崗位職責10-19
數據庫工程師崗位職責10-20
大數據開發(fā)工程師崗位職責12-13
高級數據庫工程師的工作職責05-12
高級軟件工程師崗位職責06-19