大數據開發工程師崗位的基本職責

在不斷進步的時代,我們都跟崗位職責有着直接或間接的聯繫,崗位職責主要強調的是在工作範圍內所應盡的責任。大家知道崗位職責的格式嗎?下面是小編爲大家整理的大數據開發工程師崗位的基本職責,歡迎閱讀與收藏。

大數據開發工程師崗位的基本職責

大數據開發工程師崗位的基本職責1

  職責:

1. 根據公司業務需求,進行數據開發及報表製作;

2. 參與BI、大數據平臺體系建設;

3. 文檔整理,包括ER圖、原型設計、數據字典整理等;

  崗位要求:

1. 本科或以上學歷,計算機相關專業,2年及以上工作經驗;

2. 熟練使用主流數據庫(如ORACLE/PostgreSQL/MYSQL等),掌握SQL查詢優化方法;

3. 熟悉HADOOP生態,能夠熟練使用HIVE/HBASE/SPARK進行數據開發;

4. 掌握JAVA或PYTHON,會TABLEAU/KYLIN/帆軟等BI工具者優先;

大數據開發工程師崗位的基本職責2

  職責:

1.有獨立工作能力,工作踏實認真,以及較強的團隊協作精神。

2.負責日誌大數據平臺的搭建和規劃;

3.在總體架構設計下,完成日誌大數據產品的設計、搭建、維護和調優,技術文檔的編寫與維護;

4.參與業務日誌的'大數據分析;

5.及時反饋開發中遇到的難點問題,溝通並尋求解決方案,按階段有計劃地完成開發任務

  任職資格:

1、計算機等相關專業本科以上學歷,2年以上開發經驗;

2、熟悉 linux 操作系統,熟悉 shell 腳本語言,精通 Java,有較強的開發能力;

2、熟練使用SQL,熟悉Mysql、MongoDB、Hive等數據庫技術的基本操作及原理;

3、熟悉Hadoop/Spark生態系統組件的使用,至少有1年的Spark(Core/Streaming/SQL)開發經驗;

4、熟悉Elastic產品線(如 Elasticsearch、Kafka、Kibana、Logstash)的使用方法,瞭解常見優化方案,熟悉Elasticsearch部署、監控及性能調優;

5、熟悉數據挖掘、機器學習、網絡數據分析等技術優先;

大數據開發工程師崗位的基本職責3

  職責:

1、負責大數據統計平臺建設與優化;

2、負責廣告效果分析,反作弊平臺建設;

3、負責移動廣告平臺相關係統的設計研發及持續優化。

  職位要求:

1、計算機或相關專業本科學歷及以上,2年工作經驗;

2、精通大數據採集、處理、存儲、查詢相關技術;

3、熟悉Hadoop/Hbase/Hive/Spark/Storm/Kafka相關技術;

4、至少熟練掌握 Java/Scala/Python 中一門語言;

5、有做過大數據量查詢優化的優先;

6、有大數據服務運維、性能調優者優先;

7、熟悉常用的設計模式,對MVC框架有了解;

8、強烈的責任心,對技術充滿熱情,高效率,良好的溝通能力。

大數據開發工程師崗位的基本職責4

  職責:

1、負責大數據平臺的技術和產品的設計、開發、優化和維護;

2、負責大數據平臺設計文檔編寫,線上產品的維護;

3、負責系統性能優化,解決各類潛在系統技術風險,保證系統的安全、穩定、快速運行;

4、負責整個產品平臺的搭建、多維數據庫建設及管控流程設計;

5、參與指標設計,數據建模,負責將數據模型在系統中實現;

6、負責數據抽取、數據交換、實時計算等框架研究及相關產品的研發;

7、負責追蹤整體產品過程及質量把控。

  任職要求:

1、專業技能:精通 Hadoop 生態圈中的一項或幾項技術,深入瞭解 Hadoop 及相關組件的部署及調優;設計或開發過大容量,高性能,高可用,易擴展的分佈式系統;熟悉實時計算/流式計算系統,至少熟悉一項 Nosql 技術;具有紮實 java 功底及開發能力;對 hadoop,hive,hbase,spark 等相關源碼有一定了解;

2、學歷背景:計算機相關專業本科及以上學歷;

3、工作經驗:3年以上JAVA開發經驗及1年以上大數據研發經驗

4、能力素質:具有出色的抽象設計能力,思路清晰,善於思考,良好的團隊合作能力、溝通能力、較好的自學能力,具有敬崗愛業的精神。

5、有團隊管理經驗者優先。