大數據開發工程師崗位的職責描述
大數據開發工程師負責大數據體系架構設計和應用產品的研究。以下是小編整理的大數據開發工程師崗位的職責描述。
大數據開發工程師崗位的職責描述1
職責：
1、負責異構數據系統和大數據平臺的集成與融合;
2、負責數據挖掘算法的設計及對海量數據進行挖掘分析;
3、負責分布式數據倉庫平臺、海量數據批處理平臺、實時數據處理平臺等系統開發;
4、參與海量數據處理，業務數據體系的設計、數據統計、分析及數據建模;
5、參與數據平臺各系統的性能分析與系統優化，不斷提高系統運行效率;
6、完成領導交辦的其他任務。
任職資格：
1、計算機及其相關專業，大專及以上學歷。兩年以上大數據應用經驗;
2、具備實時處理框架的設計和開發能力，熟練掌握Storm、Spark streaming等大數據實時處理框架中的一種;
3、熟悉Spark 、R、Hadoop、Hbase、Hive、Elastic Search/Solr等相關技術;
4、熟悉Scala、熟悉Linux開發環境，能進行shell腳本的編寫;
5、具有較強的邏輯分析能力，高度的責任心及團隊合作精神;
6、具有實際大數據項目的成功經驗者優先考慮。
大數據開發工程師崗位的職責描述2
職責
1、參與大規模數據快速查詢系統的架構設計和開發;
2、大規模數據挖掘和機器學習算法的實現;
3、在線和離線海量數據分析平臺的開發;
4、研究大數據前沿技術，提升系統的運維效率;
5、實現大數據基礎架構平臺的自動化運維。
任職資格
1、計算機相關專業,具有3年以上大數據開發經驗，熟悉Java,Linux;
2、熟悉Hadoop大數據處理系統的開發,搭建及部署者優先;
3、熟練地處理數據模型、數據ETL以及存儲管理;
4、熟悉HDFS/Hive/MapReduce/Kylin/HBase，能獨自進行Mapreduce程序開發者優先;
5、熟悉分布式系統概念、架構，有大規模分布式系統設計、實現、部署等經驗;
6、有較強的書面與口頭溝通表達能力，獨立分析、解決問題的能力。
大數據開發工程師崗位的職責描述3
職責：
1、參與南方電網軟件產品(項目)前/后臺服務開發，要求高性能、高可用、高并發;
2、獨立完成產品模塊(項目)核心代碼開發、業務代碼開發、系統性能調優等工作;
3、根據分配任務制定開發計劃并按時完成相應模塊的設計、開發和單元測試;
4、參與產品(項目)相關系統需求分析以及撰寫相關系統設計文檔;
要求：
1. 五年左右大數據研發崗位工作經驗
2、豐富大數據開發經驗：熟悉企業大數據常用技術，熟悉Spark、Flume、Hbase、Hadoop、Kafka，ES技術;
3、具有大型應用系統開發經驗，具有分布式、高并發、高性能等架構經驗，具有一定團隊管理經驗者優先;
4、了解J2EE技術平臺及主流框架，具有SpingMVC、SpringBoot、Spring cloud、Mybatis、Redis等框架開發經驗;
5、了解HTML5,CSS3,JavaScript,Ajax,jQuery等Web前端技術，熟悉jQuery、Bootstrap、AngularJS，VUE等主流前端JS框架中的一種;
大數據開發工程師崗位的職責描述4
職責：
1、負責大數據ETL開發與維護;
2、負責大數據平臺數據庫的設計以及開發;
3、負責大數據計算框架的選型與計算流程的設計與開發;
4、負責數據服務的設計與開發。
任職資格：
1、本科及以上學歷;
2、熟悉Flink、flume、jstorm、sparkstream、hive、spark等分布式開源軟件，具備系統優化與性能調優能力者優先;
3、精通JAVA等面向對象編程，有分布式并行計算的開發經驗優先;
4、熟練掌握至少一種MySQL、SQL Server、Oracle等關系型數據庫或MongoDB、Redis等NoSQL數據庫 ,有hive等數據倉庫研發經驗優先;
5、熟悉大數據、云計算概念，了解Hadoop、Hive、Hbase等大數據主流技術及開源框架者優先;
6、自學能力強，溝通能力較好，有一定獨立分析，技術研究能力，具有良好的團隊合作精神;
7、數據意識強，有較好的文檔編寫能力，以及踏實的工作作風。
大數據開發工程師崗位的職責描述5
職責
1、負責大數據分析平臺的建設，基于歷史和業務實時數據構建數據挖掘模型;
2、根據需求設計和實現數據分析展示平臺;
3、負責建立、維護和改進大數據分析流程、規范、方法;
4、負責基于大數據的數據分析算法研究，基于數據分析結果優化現有應用并探索新的應用。
任職要求：
1、本科及以上學歷，統計、數學、計算機或相關專業/方向，3年以上數據分析、數據挖掘相關工作經驗;
2、精通MATLAB、Python等大數據涉及的語言和工具，并能熟練運用相關數據分析工具實現數據分析方法;
3、對機器學習、數據挖掘算法及其應用有比較全面的認識和理解，熟悉主流數據挖掘框架;
4、熟悉分布式數據庫、數據倉庫和數據集市，熟悉數據庫相關操作和編程;
5、具有優秀的發現、分析并解決問題的能力，積極性高，具有嚴謹縝密的工作習慣、較強的溝通能力及團隊合作精神;
6、有旅游行業數據分析與挖掘從業經驗者優先。有主導完成優秀應用、大型數據平臺項目、有數據挖掘，算法設計等開發經驗者優先。
相關