數據架構師崗位職責

在我們平凡的日常裏,崗位職責起到的作用越來越大,制定崗位職責有利於提高工作效率和工作質量。擬起崗位職責來就毫無頭緒?以下是小編整理的數據架構師崗位職責,歡迎閱讀與收藏。

數據架構師崗位職責

數據架構師崗位職責1

崗位職責:

1、負責相關開源系統/組件的性能、穩定性、可靠性等方面的深度優化;

2、負責解決項目上線後生產環境的`各種實際問題,保障大數據平臺在生產上的安全、平穩運行;

3、推動優化跨部門的業務流程,參與業務部門的技術方案設計、評審、指導;

4、負責技術團隊人員培訓、人員成長指導。

5、應項目要求本月辦公地址在錦江區金石路316號新希望中鼎國際辦公,月底項目結束後在總部公司辦公

任職要求:

1、熟悉linux、JVM底層原理,能作爲技術擔當,解決核心技術問題;

2、3年以上大數據平臺項目架構或開發經驗,對大數據生態技術體系有全面瞭解,如Yarn、Spark、HBase、Hive、Elasticsearch、Kafka、PrestoDB、Phoenix等;

3、掌握git、maven、gradle、junit等工具和實踐,注重文檔管理、注重工程規範優先;

4、熟悉Java後臺開發體系,具備微服務架構的項目實施經驗,有Dubbo/Spring cloud微服務架構設計經驗優先;

5、性格開朗、善於溝通,有極強的技術敏感性和自我驅動學習能力,注重團隊意識。

數據架構師崗位職責2

崗位職責:

1、負責面向政府信領域的企業(不限於)大數據平臺、大數據應用等系統的架構設計、技術規劃、技術選型

2、跟進業界大數據技術發展動態,匹配行業應用訴求,制定大數據策略,提前識別關鍵技術並完成技術驗證;

3、支撐售前完成項目解決方案技術架構的設計及重要客戶的交流;

4、負責指導研發完成大數據產品的開發

5、帶領團隊進行產品核心技術的創新和積累

崗位要求:

1、熟悉BI和大數據領域的解決方案,具備該領域全面的技術積累,包括報表平臺,OLAP引擎和DB,ETL,數據倉庫建模和設計,海量分佈式數據處理分析架構;

2、在大數據處理和分析領域具有3年或者以上的技術規劃、架構設計經驗,並有成功的項目實踐;

3、4年以上Hadoop實戰經驗,熟悉Hadoop底層文件系統及分佈式計算框架,具備傳統數據倉庫、MPP、Hadoop等混搭平臺架構的.設計能力和數據建模能力,對大規模數據並行計算、傳輸、處理等有豐富的經驗;

4、有實際應用storm、spark、flume、kafka等項目經驗優先;

5、卓越的技術領導力,善於溝通、發現和解決產品需求階段、開發階段和測試階段的問題,並能提供合理解決方案,有大中型互聯網企業工作背景優先。

數據架構師崗位職責3

1. 負責大數據平臺的基礎技術規劃,編制相關規範文檔。

2. 負責大數據平臺的數據採集,處理,存儲以及挖掘分析的'架構實現。

3. 負責大數據平臺的實際規劃建設,包括環境和框架的規劃搭建以及部分核心編碼工作。

4. 負責大數據相關技術發展方向的預研。

5. 參與業務需求調研,根據需求及行業特點設計大數據解決方案並跟進具體實施項目。

6. 制定大數據平臺中數據質量,業務質量監控及管理辦法。

崗位要求:

1. 全日制本科及以上學歷,5年以上工作經驗,4年及以上大數據架構設計經驗,熟悉大數據解決方案,包括Hadoop平臺、Spark、storm、機器學習、深度學習等大數據解決方案。

2. 深刻理解大數據處理(流計算、分佈式計算、分佈式文件系統、分佈式存儲等相關技術)實現方法。有架構和設計實踐經驗。

3. 精通大型數據庫Oracle、SqlServer等的開發。

4. 精通java,Python中的一種或多種語言。

5. 熟悉容器、虛擬化、微服務框架等相關技術。

6. 對數據敏感,有嚴謹的工作思路,良好的溝通能力和團隊合作精神。

7. 熟悉R,Python,SAS、SPSS等數據挖掘經驗者優先。

8. 高寬展性,高性能,和分佈式系統的實踐及運維經驗者優先。

9. 有大型數據倉庫實施、大數據平臺數據開發經驗,熟悉運營商業務者優先。

數據架構師崗位職責4

崗位職責:

1、負責規劃大數據平臺及應用產品的需求和技術方案設計;

2、負責數據對接和對外服務設計、開發和維護,並能保證質量和性能;

3、負責基於大數據平臺的應用設計、開發和維護;

4、能從系統全局和各子系統的角度思考可能存在的問題,並提出改進方案建議;

任職要求:

1、大學本科6年以上工作經驗,計算機相關專業。

2、至少4年以上的Java開發經驗,3年以上大數據應用系統的.開發和設計經驗。

3、熟悉Hadoop生態圈技術體系,對離線計算、內存計算和流式計算均有深刻理解,如Hadoop、Storm、Spark三個中的任意二個,能進行平臺和組件優化。

4、精通Hive、HBase倉庫設計,深刻理解MR運行原理和機制,能進行以提供高任務執行效率的優化。

5、精通Java開發,熟悉JVM調優,對GC有深刻理解。

6、熟悉Linux、Shell、Kafka、Oracle、Mysql、Redis等相關技術,能進行hbase可靠性診斷和維護。

7、快速研究和學習技術能力。

數據架構師崗位職責5

職責:

1、負責大數據開發團隊建設;

2、負責行業大數據產品架構設計與研發;

3、負責帶領團隊進行行業大數據產品關鍵技術攻關。

任職要求:

1、有三年以上大數據應用、開發經驗;具備海量數據加工處理(ETL)相關經驗,對數據挖掘及機器學習有較爲深刻的理解;

2、熟悉Hadoop相關技術,對HDFS、MapReduce、Hive、HBase有一定的使用和開發經驗;

3、熟悉Linux,熟練使用Shell或Python,進行腳本編寫;

4、對數據結構和數據統計分析算法有較爲深刻理解;

5、掌握至少一種主流關係數據庫開發技術:Oracle、SQL Server、MySQL等;

6、掌握實時流計算技術,有Spark、Storm開發經驗者優先;

7、需要具備2年以上研發團隊管理經驗。

數據架構師崗位職責6

職責:

1、負責公司的大數據處理框架的研發設計工作,梳理可實現方案和技術規範;

2、開發、完善公司大數據平臺;參與公司離線、實時大數據處理系統的.設計、開發、測試及多個業務模塊的自動化集成;

3、負責業務平臺數據統計分析模塊的設計與規劃;

4、負責公司產品研發過程中的數據及存儲設計;

5、帶領和培養團隊完成組織分解的目標;

任職要求:

1、統招本科及以上學歷,計算機、軟件工程相關專業,至少8年以上工作經驗,5年以上大數據開發經驗;

2、熟悉Java、Hadoop、HDFS、Hive、HBase、Spark、Storm、Flume等相關技術的基礎架構

3、熟悉數據倉庫,數據算法,分佈式計算技術理論,具有大數據整體系統架構設計經驗;

4、熟悉Linux系統,熟練使用shell/perl/python腳本處理問題;

5、對深度學習框架(Tensorflow)和機器學習(svm隨機深林貝葉斯等)有一定了解的優先;

6、能夠組織項目開發組協同工作,包括團隊溝通、計劃、開發環境管理等

數據架構師崗位職責7

1、負責公司大數據產品的.架構設計,包含數據收集、數據存儲、數據應用,並完成相關架構設計文檔的撰寫;

2、參與規劃從數據源到數據應用的整體流程,並參與相關產品的決策;

3、負責解決核心技術問題,對技術方案進行決策;

4、負責大數據研發團隊建設、人才梯隊培養和技術團隊管理;

5、積極瞭解業界發展,研究與跟蹤大數據新技術發展方向。

數據架構師崗位職責8

1、數據分析軟件平臺架構搭建

2、負責深度學習核心框架或高性能後臺服務系統的架構設計工作,包括系統總體規劃、架構設計、系統分析、軟件實現、性能優化;

3、指導開發人員開發,並解決系統出現的問題,理解物業需求;

4、制定開發計劃和控制開發進度,負責指導研發團隊開展設計工作;

數據架構師崗位職責9

職責:

1.負責公司大數據底層框架的整體架構設計,結合公司實際業務情況進行技術選型及大數據戰略規劃;

2.負責統一數據平臺項目的整體評估、設計、架構及關鍵模塊的開發,不斷提升系統的穩定性和效率;

3.負責架構優化及系統關鍵模塊的設計開發,協助團隊解決開發過程中的技術難題;

4.建立良好的公司內外的業界技術影響力;有效輔導團隊,提升數據研發能力;

任職要求:

1.從事大數據項目相關開發和設計2年以上經驗;有作爲技術負責人系統化解決問題的成功案例;有海量數據實踐經驗優先;

2.擁有一定的算法和數據結構基礎;有很強的.數據設計抽象能力,善於從複雜的數據問題中找到關鍵路徑;

3.熟悉目前正在發展的大數據分佈式平臺前沿技術的應用;包括但不僅僅限於:hadoop、storm、spark、等;

4.良好的邏輯思維能力,良好的業務解讀能力,懂電力或通信業務優先;

5.具有鑽研精神,樂於接受挑戰;

數據架構師崗位職責10

—、完善基礎,不斷提高綜合分析能力

1、爲人正直、責任心強,作風嚴謹、工作仔細認真,具備良好的職業道德素養

2、有較強的需求分析能力、邏輯推理能力、溝通協調能力 3、遵守公司數據統計分析工作的規範管理,不虛報,不舞弊,不弄虛作假

4、熟練掌握並操作MicrosoftOfficeWord、Excel、PPT,熟悉ERP軟件各報表數據整合

5、做好工作重心的轉移,服從公司安排協助其他部門工作 6、熟悉公司運作對各部門的'數據統計分析工作給予支持配合 7、編報各類統計數據分析報表,整合彙總、綜合分析,按時爲上司提供可行性的報告

8、保守公司統計機密

二、工作細責

1、制定貨品供應鏈(採購、配貨、倉儲、零售、分銷、核數等)分析報表及便捷運用模板

2、規範整理各相關部門報表數據庫,制定老闆報表

3、每天根據信息反饋,覈對各倉庫及店鋪倉儲變動表進行校正並提供分析報表

4、每天根據信息反饋,提供各店鋪及個人銷售情況分析報表 5、每週根據信息反饋,提供店鋪及個人銷售情況和銷售業績分析報表

6、每週根據信息反饋,提供暢、滯銷款報表分析或庫存整改建議分析報告

7、每兩週根據信息反饋,提供各門店及渠道配貨報表或建議分析報告

8、每個月根據信息數據綜合分析,爲公司各部門制定計劃指標提供數據根據

9、每三個月根據信息調查反饋,制定各區域消費羣體消費情況數據分析圖表

11、年底爲公司年總結提供各項分析數據彙總制定公司當年綜合多元分析數據圖表,

12、經上級批准分析指定部門的信息數據需求,支持項目決策分析並協助風險價值評估

13、經上級批准協助參與渠道開發的調研分析及評估

數據架構師崗位職責11

1.負責大數據基礎和應用平臺的整體規劃和架構設計,參與需求分析,架構設計,詳細設計以及技術選型決策

2.參與數據挖掘和建模相關核心算法的代碼實現

3.負責大數據算法平臺的.技術把關,性能調優,控制架構質量,解決項目技術難題;對研發項目和任務需求進行評估和方案設計、拆分任務並指導工程師完成開發

4.帶領團隊提供並實現大數據算法平臺上各項數據接入、數據挖掘分析及數據可視化的架構設計與能力,支持解決方案實施

5.負責數據庫設計、應用架構設計、核心技術選型等工作

6.協調解決開發中的技術問題、設計和監控運營指標,保障系統穩定運行

7.培養,指導有能力的員工,指導工程師進行技術驗證實現,核心技術攻關,解決開發過程中的技術難題

數據架構師崗位職責12

崗位職責:

1、基於公司大數據基礎和數據資產積累,負責大數據應用整體技術架構的設計、優化,建設大數據能力開放平臺;負責大數據應用產品的架構設計、技術把控工作。

2、負責制定大數據應用系統的數據安全管控體系和數據使用規範。

3、作爲大數據技術方案到產品實現的技術負責人,負責關鍵技術點攻堅工作,負責內部技術推廣、培訓及知識轉移工作。

4、負責大數據系統研發項目任務規劃、整體進度、風險把控,有效協同團隊成員並組織跨團隊技術協作,保證項目質量與進度。

5、負責提升產品技術團隊的技術影響力,針對新人、普通開發人員進行有效輔導,幫助其快速成長。

任職資格:

1、計算機、數學或相關專業本科以上學歷,5—20xx年工作經驗,具有大型系統的技術架構應用架構數據架構相關的.實踐工作經驗。

2、有分佈式系統分析及架構設計經驗,熟悉基於計算集羣的軟件系統架構和實施經驗。

3、掌握Hadoop/Spark/Storm生態圈的主流技術及產品,深入瞭解Hadoop/Spark/Storm生態圈產品的工作原理及應用場景。

4、掌握Mysql/Oracle等常用關係型數據庫,能夠對SQL進行優化。

5、熟悉分佈式系統基礎設施中常用的技術,如緩存(Varnish、Memcache、Redis)、消息中間件(Rabbit MQ、Active MQ、Kafka、NSQ)等;有實踐經驗者優先。

6、熟悉Linux,Java基礎紮實,至少3—5年以上Java應用開發經驗,熟悉常用的設計模式和開源框架。

數據架構師崗位職責13

架構師的職責就是設計一個公司系統的基礎架構,並提供關於怎樣建立和維護系統的指導方針。具體來講,架構師的職責主要體現在以下幾方面:

1、負責公司系統的架構設計、研發工作。

2、承擔從業務向技術轉換的橋樑作用。

3、協助項目經理制定項目計劃和控制項目進度。

4、負責輔助並指導系統分析開展設計工作。

5、負責組織技術研究和攻關工作。

6、負責組織和管理公司內部的技術培訓工作。

7、負責組織及帶領公司內部員工研究與項目相關的新技術。

8、管理技術支撐團隊並給項目、產品開發實施團隊提供技術保障。

9、理解系統的業務需求,制定系統的整體框架(包括、技術框架和業務框架)。

10、對系統框架相關技術和業務進行培訓,指導開發人員開發。並解決系統開發、運行中出現的各種問題。

數據分析員崗位職責

1、數據分析專員崗位職責

1.參與建立公司的運營管理體系

2.參與編制運營管理的相關模板、工具、工作指引,並持續改進

3.參與編制計劃管理的相關模板、工作指引,並持續改進;

4.根據標準和程序文件的'要求,參與制定公司級數據收集的範圍;

5.依據收集範圍定期進行各類數據資料的收集,並進行統計、整理

6.依據銷售計劃的數據,統計、整理生產部門月度生產計劃,保障生產的順利進行;

7.依據生產計劃的數據,統計、整理物資部月度採購計劃,保障採購的順利進行;

8.參與收集、審覈相關部門銷售計劃,保障銷售的順利進行;

9.定期將各類指標與計劃進行比較,找出差距;

10.參與建立考覈體系,制定考覈方案和考覈細則;

數據架構師崗位職責14

1、正確理解業務需求,對需求進行工作量評估;

2、參與項目相關的`需求、設計、投產手冊等文檔的編寫;

3、根據進度計劃,完成所承擔功能模塊的設計、開發、單元測試、聯調測試;

4、配合測試組修復代碼缺陷,確保功能實現與代碼質量;

5、負責所承擔功能模塊投產、部署,及上線後的日常維護;

6、完成項目經理或者架構師安排的其他工作;

數據架構師崗位職責15

1、負責大數據平臺技術框架的技術選型和搭建;

2、負責核心技術問題公關,建設高可靠性,擴展性及高性能大數據/數據應用平臺;

3、負責規劃數據挖掘的整體流程,負責大數據開發團隊業務需求開發;

4、與其他團隊密切配合,尋求數據層面的業務價值,利用數據分析結論推動產品優化;

5、研究和分享大數據架構領域新技術。

任職要求:

1、計算機相關專業全日制統招本科及以上;

2、5年以上工作經驗,至少3年以上大數據項目相關工作經驗,能夠設計大型大數據系統的`架構和技術方案;

3、精通Hadoop/Spark/Hbase/Hive等大數據技術,精通ETL技術;

4、熟悉數據挖掘,瞭解典型大數據算法和策略;

5、熟悉主流Java技術框架,精通關係型數據庫及SQL語言,熟悉NoSQL/JSON/XML;

6、有較強的學習能力和問題解決能力,邏輯嚴密、思路清晰;

7、有數據倉庫經驗者優先,有金融行業項目經驗者優先。