您的位置:群走網>實用資料>崗位職責>數據架構師崗位職責
數據架構師崗位職責
更新時間:2024-09-26 00:36:49
  • 相關推薦
數據架構師崗位職責

  在當下社會,崗位職責對人們來說越來越重要,崗位職責主要強調的是在工作范圍內所應盡的責任。什么樣的崗位職責才是有效的呢?下面是小編為大家收集的數據架構師崗位職責,僅供參考,大家一起來看看吧。

數據架構師崗位職責1

  1.負責大數據基礎和應用平臺的整體規劃和架構設計,參與需求分析,架構設計,詳細設計以及技術選型決策

  2.參與數據挖掘和建模相關核心算法的`代碼實現

  3.負責大數據算法平臺的技術把關,性能調優,控制架構質量,解決項目技術難題;對研發項目和任務需求進行評估和方案設計、拆分任務并指導工程師完成開發

  4.帶領團隊提供并實現大數據算法平臺上各項數據接入、數據挖掘分析及數據可視化的架構設計與能力,支持解決方案實施

  5.負責數據庫設計、應用架構設計、核心技術選型等工作

  6.協調解決開發中的技術問題、設計和監控運營指標,保障系統穩定運行

  7.培養,指導有能力的員工,指導工程師進行技術驗證實現,核心技術攻關,解決開發過程中的技術難題

數據架構師崗位職責2

  職責:

  1、負責大數據開發團隊建設;

  2、負責行業大數據產品架構設計與研發;

  3、負責帶領團隊進行行業大數據產品關鍵技術攻關。

  任職要求:

  1、有三年以上大數據應用、開發經驗;具備海量數據加工處理(ETL)相關經驗,對數據挖掘及機器學習有較為深刻的理解;

  2、熟悉Hadoop相關技術,對HDFS、MapReduce、Hive、HBase有一定的使用和開發經驗;

  3、熟悉Linux,熟練使用Shell或Python,進行腳本編寫;

  4、對數據結構和數據統計分析算法有較為深刻理解;

  5、掌握至少一種主流關系數據庫開發技術:Oracle、SQL Server、MySQL等;

  6、掌握實時流計算技術,有Spark、Storm開發經驗者優先;

  7、需要具備2年以上研發團隊管理經驗。

數據架構師崗位職責3

  職責:

  1、負責公司的大數據處理框架的研發設計工作,梳理可實現方案和技術規范;

  2、開發、完善公司大數據平臺;參與公司離線、實時大數據處理系統的設計、開發、測試及多個業務模塊的自動化集成;

  3、負責業務平臺數據統計分析模塊的設計與規劃;

  4、負責公司產品研發過程中的數據及存儲設計;

  5、帶領和培養團隊完成組織分解的目標;

  任職要求:

  1、統招本科及以上學歷,計算機、軟件工程相關專業,至少8年以上工作經驗,5年以上大數據開發經驗;

  2、熟悉Java、Hadoop、HDFS、Hive、HBase、Spark、Storm、Flume等相關技術的`基礎架構

  3、熟悉數據倉庫,數據算法,分布式計算技術理論,具有大數據整體系統架構設計經驗;

  4、熟悉Linux系統,熟練使用shell/perl/python腳本處理問題;

  5、對深度學習框架(Tensorflow)和機器學習(svm隨機深林貝葉斯等)有一定了解的優先;

  6、能夠組織項目開發組協同工作,包括團隊溝通、計劃、開發環境管理等

數據架構師崗位職責4

  崗位職責:

  1、負責相關開源系統/組件的性能、穩定性、可靠性等方面的深度優化;

  2、負責解決項目上線后生產環境的各種實際問題,保障大數據平臺在生產上的安全、平穩運行;

  3、推動優化跨部門的.業務流程,參與業務部門的技術方案設計、評審、指導;

  4、負責技術團隊人員培訓、人員成長指導。

  5、應項目要求本月辦公地址在錦江區金石路316號新希望中鼎國際辦公,月底項目結束后在總部公司辦公

  任職要求:

  1、熟悉linux、JVM底層原理,能作為技術擔當,解決核心技術問題;

  2、3年以上大數據平臺項目架構或開發經驗,對大數據生態技術體系有全面了解,如Yarn、Spark、HBase、Hive、Elasticsearch、Kafka、PrestoDB、Phoenix等;

  3、掌握git、maven、gradle、junit等工具和實踐,注重文檔管理、注重工程規范優先;

  4、熟悉Java后臺開發體系,具備微服務架構的項目實施經驗,有Dubbo/Spring cloud微服務架構設計經驗優先;

  5、性格開朗、善于溝通,有極強的技術敏感性和自我驅動學習能力,注重團隊意識。

數據架構師崗位職責5

  1、負責大數據平臺的架構設計、核心代碼開發等任務;根據項目要求編寫相關技術文檔;

  2、負責大數據平臺的架構評審,代碼評審,上線評審;參與數據應用需求、設計、審核和評審;

  3、負責核心模塊研發,負責大數據平臺的.搭建,完成系統調試、集成與實施;

  4、負責建立和維護大數據平臺技術標準規范,指導開發人員編寫代碼;

數據架構師崗位職責6

  1、正確理解業務需求,對需求進行工作量評估;

  2、參與項目相關的'需求、設計、投產手冊等文檔的編寫;

  3、根據進度計劃,完成所承擔功能模塊的設計、開發、單元測試、聯調測試;

  4、配合測試組修復代碼缺陷,確保功能實現與代碼質量;

  5、負責所承擔功能模塊投產、部署,及上線后的日常維護;

  6、完成項目經理或者架構師安排的其他工作;

數據架構師崗位職責7

  崗位職責:

  1、負責面向政府信領域的企業(不限于)大數據平臺、大數據應用等系統的架構設計、技術規劃、技術選型

  2、跟進業界大數據技術發展動態,匹配行業應用訴求,制定大數據策略,提前識別關鍵技術并完成技術驗證;

  3、支撐售前完成項目解決方案技術架構的設計及重要客戶的交流;

  4、負責指導研發完成大數據產品的開發

  5、帶領團隊進行產品核心技術的'創新和積累

  崗位要求:

  1、熟悉BI和大數據領域的解決方案,具備該領域全面的技術積累,包括報表平臺,OLAP引擎和DB,ETL,數據倉庫建模和設計,海量分布式數據處理分析架構;

  2、在大數據處理和分析領域具有3年或者以上的技術規劃、架構設計經驗,并有成功的項目實踐;

  3、4年以上Hadoop實戰經驗,熟悉Hadoop底層文件系統及分布式計算框架,具備傳統數據倉庫、MPP、Hadoop等混搭平臺架構的設計能力和數據建模能力,對大規模數據并行計算、傳輸、處理等有豐富的經驗;

  4、有實際應用storm、spark、flume、kafka等項目經驗優先;

  5、卓越的技術領導力,善于溝通、發現和解決產品需求階段、開發階段和測試階段的問題,并能提供合理解決方案,有大中型互聯網企業工作背景優先。

數據架構師崗位職責8

  職責:

  1、搭建基于Hadoop/Spark的數據挖掘體系和大數據分析系統架構;

  2、研究大數據領域前沿數據挖掘技術,并引入相應技術在數據中心的使用;

  3、進行大數據系統框架設計、模型算法開發;

  4、負責大型數據挖掘項目方案制定、項目實施落地及優化等;

  5、開展數據爬取、聚類分析、輿情分析、魚骨圖分析、定價策略等領域數據挖掘工作;

  任職資格:

  1、本科以上學歷(持有學士學位)(985,211優先),計算機相關專業,五年工作經驗;

  2、二年以上數據挖掘項目經驗,完整參與過數據挖掘大數據平臺的架構開發過程,具備互聯網行業背景優先;

  3、精通分布式計算框架(hadoop、spark、Storm等)及相關經驗,熟練掌握Hive/SQL,Python,熟悉Python、R相關數值科學計算庫(NumPy,SciPy等);

  4、了解傳統的'BI/DW理論,能結合傳統BI實踐設計大數據平臺;

  5、熟悉常用機器學習算法(如分類、回歸、聚類、關聯規則等)及其原理,具備應用場景經驗,如用戶畫像、商品關聯度分析、輿情分析;

  6、熟悉主數據、元數據、數據質量、和數據建模等數據治理相關的體系和方法;

  7、具備較強的邏輯思維能力、數據敏感度,擅于利用數據發現問題及解決問題;

數據架構師崗位職責9

  1、數據分析軟件平臺架構搭建

  2、負責深度學習核心框架或高性能后臺服務系統的架構設計工作,包括系統總體規劃、架構設計、系統分析、軟件實現、性能優化;

  3、指導開發人員開發,并解決系統出現的問題,理解物業需求;

  4、制定開發計劃和控制開發進度,負責指導研發團隊開展設計工作;

數據架構師崗位職責10

  職責:

  1、負責大數據基礎平臺的整體規劃和架構設計,參與需求分析、技術決策以及詳細設計;

  2、為現有大數據集群Hadoop、hive平臺提供性能調優、架構優化重組,解決系統中的關鍵問題和技術難題;

  3、把握基礎業務復雜系統的設計,確保系統的架構質量,編寫核心部分代碼;

  4、持續挑戰新的技術方向,攻克大數據量,高并發,穩定性等各種技術難點。

  任職資格:

  1、計算機或相關專業本科及以上學歷;

  2、5年以上hadoop的應用開發經驗,5年以上數據倉庫開發實踐經驗,至少一個企業級數據倉庫項目開發經驗或者大數據處理項目經驗;

  3、良好的.編程開發能力,精通PHP及其他開發語言;

  4、熟悉mysql等數據庫經驗,具備優秀的SQL編寫、調優能力;

  5、熟練掌握Linux常規命令與工具,精通shell, perl, python等腳本語言至少一種;

  6、軟件基礎理論知識扎實,具有良好的數據結構、算法功底;

  7、對新技術敏感,學習能力強,樂于接受挑戰,具有良好的團隊合作精神;

數據架構師崗位職責11

  1、負責大數據項目技術架構評估與設計;

  2、負責關鍵功能的開發,技術難題的解決,以及輸出代碼的.關鍵把控;

  3、負責對使用關鍵技術的預研和選型,完成PoC;

  4、指導工程師完成開發工作,并能分享技術經驗。

數據架構師崗位職責12

  崗位職責:

  1、負責規劃大數據平臺及應用產品的需求和技術方案設計;

  2、負責數據對接和對外服務設計、開發和維護,并能保證質量和性能;

  3、負責基于大數據平臺的應用設計、開發和維護;

  4、能從系統全局和各子系統的角度思考可能存在的'問題,并提出改進方案建議;

  任職要求:

  1、大學本科6年以上工作經驗,計算機相關專業。

  2、至少4年以上的Java開發經驗,3年以上大數據應用系統的開發和設計經驗。

  3、熟悉Hadoop生態圈技術體系,對離線計算、內存計算和流式計算均有深刻理解,如Hadoop、Storm、Spark三個中的任意二個,能進行平臺和組件優化。

  4、精通Hive、HBase倉庫設計,深刻理解MR運行原理和機制,能進行以提供高任務執行效率的優化。

  5、精通Java開發,熟悉JVM調優,對GC有深刻理解。

  6、熟悉Linux、Shell、Kafka、Oracle、Mysql、Redis等相關技術,能進行hbase可靠性診斷和維護。

  7、快速研究和學習技術能力。

數據架構師崗位職責13

  崗位職責:

  1、負責公司大數據平臺架構的技術選型和技術難點攻關工作;

  2、依據行業數據現狀和客戶需求,完成行業大數據的特定技術方案設計與撰寫;

  3、負責研究跟進大數據架構領域新興技術并在公司內部進行分享;

  4、參與公司大數據項目的'技術交流、解決方案定制以及項目的招投標工作;

  5、參與公司大數據項目前期的架構設計工作;

  任職要求:

  1、計算機及相關專業本科以上,5年以上數據類項目(數據倉庫、商務智能)實施經驗,至少2年以上大數據架構設計和開發經驗,至少主導過一個大數據平臺項目架構設計;

  2、精通大數據生態圈的技術,包括但不限于MapReduce、Spark、Hadoop、Kafka、Mongodb、Redis、Flume、Storm、Hbase、Hive,具備數據統計查詢性能優化能力。熟悉星環大數據產品線及有過產品項目實施經驗者優先;

  3、優秀的方案撰寫能力,思路清晰,邏輯思維強,能夠根據業務需求設計合理的解決方案;

  4、精通ORACLE、DB2、mySql等主流關系型數據庫,熟悉數據倉庫建設思路和數據分層架構思想;

  5。熟練掌握java、R、python等1—2門數據挖掘開發語言;

  6。熟悉云服務平臺及微服務相關架構思想和技術路線,熟悉阿里云或騰訊云產品者優先;

  7、有煙草或制造行業大數據解決方案售前經驗者優先;

  8、能適應售前支持和項目實施需要的短期出差;

數據架構師崗位職責14

  1. 負責大數據平臺的基礎技術規劃,編制相關規范文檔。

  2. 負責大數據平臺的數據采集,處理,存儲以及挖掘分析的'架構實現。

  3. 負責大數據平臺的實際規劃建設,包括環境和框架的規劃搭建以及部分核心編碼工作。

  4. 負責大數據相關技術發展方向的預研。

  5. 參與業務需求調研,根據需求及行業特點設計大數據解決方案并跟進具體實施項目。

  6. 制定大數據平臺中數據質量,業務質量監控及管理辦法。

  崗位要求:

  1. 全日制本科及以上學歷,5年以上工作經驗,4年及以上大數據架構設計經驗,熟悉大數據解決方案,包括Hadoop平臺、Spark、storm、機器學習、深度學習等大數據解決方案。

  2. 深刻理解大數據處理(流計算、分布式計算、分布式文件系統、分布式存儲等相關技術)實現方法。有架構和設計實踐經驗。

  3. 精通大型數據庫Oracle、SqlServer等的開發。

  4. 精通java,Python中的一種或多種語言。

  5. 熟悉容器、虛擬化、微服務框架等相關技術。

  6. 對數據敏感,有嚴謹的工作思路,良好的溝通能力和團隊合作精神。

  7. 熟悉R,Python,SAS、SPSS等數據挖掘經驗者優先。

  8. 高寬展性,高性能,和分布式系統的實踐及運維經驗者優先。

  9. 有大型數據倉庫實施、大數據平臺數據開發經驗,熟悉運營商業務者優先。

數據架構師崗位職責15

  1.深刻理解政府行業業務模式,構建政府行業的數據模型,制定公司大數據技術發展路線;

  2.對接業務研究和技術部門,主動搜集和轉化需求,組織數據中心業務開發,進行數據相關產品需求分析和設計;

  3.搭建數據倉庫,研發數據庫管理系統,搜集、提取、處理業務積累的海量數據,開展數據分析和挖掘;

  4.根據公司戰略和發展需要,規劃數據中心重點工作和任務;落實部門人員、事務管理,開展跨部門、跨地區協作,協助對外交流與合作。

【數據架構師崗位職責】相關文章:

數據架構師崗位職責(通用21篇)10-19

架構師崗位職責01-25

軟件架構師崗位職責10-27

軟件架構師的崗位職責06-06

系統架構師崗位職責07-08

Java架構師崗位職責10-06

Java架構師的崗位職責01-15

軟件架構師的崗位職責08-27

前端架構師的崗位職責09-16

久久一级2021视频,久久人成免费视频,欧美国产亚洲卡通综合,久久综合亚洲一区二区三区色
亚洲女优中文字幕 | 亚洲欧美日韩日产在线首页 | 亚洲欧美中文字幕在线一区一 | 色国产综合免费视频在线播放 | 日韩一级精品久久久久 | 午夜免费啪视频在线观看区 |