- 相關推薦
在不斷進步的社會中,越來越多人會接觸到崗位職責,崗位職責是組織考核的依據。什么樣的崗位職責才是有效的呢?以下是小編收集整理的數據開發崗位職責,僅供參考,歡迎大家閱讀。
數據開發崗位職責1
1、參與大數據平臺相關的數據整合清洗、數據應用的設計和開發
2.協助用戶完成用戶測試,解決測試發現的問題。
任職要求:
1、本科及以上學歷,計算機或相關專業,2年以上DW/BI項目實施和開發經驗
2、熟悉大數據開源產品的架構和技術細節,具有Hadoop、Mapreduce、HBase、Hive、Spark、Kafka、Redis等大數據平臺開發經驗
3、有金融、互聯網金融、電商、廣告等行業數據倉庫,數據挖掘經驗
4、精通SQL,熟練使用至少一種數據庫,如Oracle、MySQL、PostgreSQL等
1、3年以上工作經驗;至少有一個數據倉庫/數據集市/ODS項目開發經驗;
2、精通oracle數據庫的開發(view/TRIGER/function/procedure/package)及SQL調優,熟悉oracle數據庫的基礎原理;
3、精通ETL工具datastage開發;
4、熟悉linux/Unix系統,有shell/Perl腳本開發能力;
5、具備良好的分析能力和溝通協調能力,能夠承受較高的壓力,工作認真負責,積極主動,有較高的效率;
6、熟悉一種主流商用調度工具TWS/control-M/AUTOSYS優先;
7、熟悉Python開發優先;
崗位職責:
1、參與大數據平臺的搭建、開發和維護工作;
2、負責大數據采集、清洗、整合等工作;
3、負責大數據平臺文本挖掘分析等工作;
4、負責BI以及報表開發;
5、參與新技術選型和調研,解決不斷增長的海量數據帶來的存儲和計算挑戰。
任職資格:
1、本科以上學歷,計算機、信息管理等相關專業;
2、深厚的Java功底,3年及以上的并發編程經驗,參與過分布式高性能服務的設計開發過程,有大規模分布式系統的實踐經驗;
3、熟悉hadoop/kafka/flume/storm/spark/zookeeper等相關技術;
4、熟悉常見數據庫如oracle/mysql,有Nosql數據庫如mongoDb等經驗者優先;
5、熟悉redis或memcache者優先;
6、對于分布式系統有一定了解,有海量數據處理經驗;
7、具備較強學習能力,良好的溝通能力和團隊合作意識
1、負責基于Hadoop/Spark/Hive/Storm/kafka等分布式計算平臺實現離線分析、實時分析的計算框架;
2、負責平臺數據倉庫的選型、設計、開發、維護工作;
3、負責上述計算平臺系統的可用性、容量、性能、監控、發布、安全等運維管理工作,確保系統持續穩定、高效運行;
4、協調大數據團隊高效的進行數據處理、分析、統計、挖掘工作;
崗位要求:
1、熟悉服務器/存儲/網絡/OS等基礎架構基本元素,熟悉linux操作系統,具備較強的調優排障能力;
2、熟悉Hadoop、Spark等大數據框架,有大型分布式計算開發、部署等相關經驗;
3、熟悉shell/python或其他腳本語言中的`任意一門,有扎實的Java開發基礎,了解jvm的運行機制以及相應調優;
4、能夠獨立完成項目的系統分析、設計,并主導完成詳細設計和編碼的任務。
5、注重性能,良好的代碼管理及重構意識。具備獨立溝通需求,設計,架構,開發的能力;
6、熟悉主流的數據存儲產品,有開發經驗者優先。如:HBase,Hive,Redis,MongoDB,MySQL等;
7、有團隊管理經驗者優先。
數據開發崗位職責2
1.負責完成業務數據指標、報表、接口等需求的'分析及開發實現;
2. 參與數據倉庫搭建項目的ETL開發實施、性能調優、數據監控、保障系統穩定運行;
3. 參與公司數據統一發布平臺的建設和維護工作;
4. 部門業務上級交代的其它相關工作。
崗位要求:
1.計算機本科學歷,2年以上工作經驗,其中1年及以上數據開發工作經驗;
2.熟練掌握MySQL、MSSQL、Mongo主流數據庫的使用,精通SQL、存儲過程、函數;
3.熟悉ETL工具者優先,如kettle,Sqoop、Datastage、Informatica;
4.掌握一門編程語言優先,如Python、R語言。
數據開發崗位職責3
職責:
1、根據設計方案,完成相關模塊代碼編寫和測試;
2、負責相關項目的維護和技術支持工作;
3、配合項目組其他成員完成項目相關開發工作;
4、協助完成項目的系統交付工作,對項目實施提供支持。
任職資格:
1、培訓過JAVA或有半年以上JAVA項目開發經驗;
2、計算機相關專業優先考慮,有1-2年開發工作經驗;
3、熟悉使用oracle/sqlserver/mysql至少一種數據庫,熟練使用sql開發;
4、性格開朗、具有良好的.學習能力;
5、工作責任心強,能承受工作壓力。
數據開發崗位職責4
職責:
1.負責設計和實現手機衛士大數據BI平臺;
2.不斷完善數據產品的架構設計,應用開發和新技術迭代;
3.配合業務,產品,根據不同的業務需求,靈活快速地完成具有挑戰性的項目,為業務提供有價值的數據分析和預測。
任職要求
1.計算機軟件相關專業本科及以上學歷,至少3年以上工作經驗;
2.認可技術與平臺在BI的價值,能夠深入業務領域,通過使用數據分析和挖據技術,讓業務生成的海量數據產生更大價值。
3.熟練掌握大數據技術:包括Hadoop,Spark,Storm,Hive,Presto,Parquet,Flink,Druid,OLAP, Elastic Search等等。
4.具備良好的編程能力和代碼風格,熟練掌握Java,Python等語言,熟練使用SQL,并具有較強的優化能力。
5.需要有很強的開發和架構設計能力,特別是在大數據的`分布式和實時處理領域,對存儲引擎和查詢引擎的原理和優化都具備比較深入的理解。
6.有一定的數據挖掘和機器學習算法能力,包括推薦系統,深度學習等技術領域。
7.擁有正直、積極、寬容的品質,學習能力強,并且善于溝通合作。
數據開發崗位職責5
職位描述:
1、基于海量數據,支持業務對數據的分析和使用:
2、支持業務處理數據的流式處理、構建數據倉庫、分析用戶行為等。
任職要求:
1、有扎實的編程能力,有優秀的設計和代碼品位,對解決具有挑戰性問題充滿激情;
2、對大數據處理有豐富的'經驗和廣闊的視野;
3、熟悉常用的開源組件:hadoop/hive/spark/storm,并了解其特性和使用場景;
4、優秀的溝通理解能力,能快速理解業務,用數據解讀業務;
5、推薦或機器學習相關的開發工作優先。
數據開發崗位職責6
職責:
1、負責數據分析、加工、清理,相關處理腳本和程序的開發;
2、負責開發大數據工具,如報表平臺、多維度分析工具、ETL平臺、調度平臺的研發;
3、負責分布式大數據平臺應用開發(Hadoop/Spark/Hive/HBase等);
4、負責大數據相關平臺的'維護、優化。
任職要求:
1、本科及以上學歷,計算機相關專業,具有5年及以上的大數據ETL或數據開發經驗,熟悉大數據組件的維護以及調優;
2、熟練掌握Java或Python編程語言,熟悉大數據架構體系,熟悉Hadoop、HDFS、Hive、HBase、Spark、Kafka等技術中的一個或者多個,熟悉Sqoop、DataX等數據導入工具;
3、能熟練使用Hive、HBase、Spark等加工和處理數據,有海量數據處理經驗;
4、有數據倉庫開發經驗/BI系統開發經驗優先;
5、有電商行業數據處理與分析平臺開發經驗者優先。
數據開發崗位職責7
職責:
1、參與項目需求分析,研究項目技術細節,進行系統框架和核心模塊的詳細設計;編寫相應的.技術文檔;
2、根據公司要求規范,編寫相應的技術文檔;編制項目文檔、記錄質量測試結果
3、完成項目初始至終結的全部技術跟蹤協調工作
4、根據開發進度和任務分解完成軟件編碼工作,配合測試工程師進行軟件測試工作;
5、參與客戶溝通、項目需求調研分析并維持良好的客戶關系;編寫需求分析報告。
6、進行用戶現場軟件的部署和實施
7、完成公司領導交辦的其他工作。
崗位要求:
1、計算機相關專業,數學專業優先,本科以上學歷;
2、熟悉Oracle、Sqlserver等數據庫及SQL語言;
3、良好的團隊合作精神和社交技巧及溝通協調能力;
4、能適應經常出差。
數據開發崗位職責8
'職位描述:
1、負責根據靈云人工智能各核心能力算法的數據處理需求,提供數據處理的高級技術支持與支撐工作;
2、負責各種數據資源處理的具體方法制定與制作流程的規范化,為靈云人工智能各項核心技術構建一套有序高效與高質量的數據處理體系與方案,包括但不限于文本、語音與圖像數據加工的指導、知識庫編輯的培訓和技術文檔的編寫等內容;
3、負責數據的分析、挖掘、優化和難點攻堅等數據處理層面工作,并將其成果應用相關產品線中,以及配合核心研究員完成各種數據問題的分析、解決及其數據資源的產品化;
4、負責靈云人工智能中數據平臺的方案設計、搭建、維護和優化等工作。
任職資格:
1、學歷要求:
—畢業于211或985院校、統招本科及以上學歷,數學、統計學、計算機、智能信息處理類等專業背景。
2、工作經驗及能力要求:
—3年以上工作經驗,2年以上團隊管理經驗;
—對數字,數據敏感,具備良好的邏輯思維能力,能夠從海量數據中發現有價值的規律;
—優秀的'分析問題與解決問題能力,具有較好的歸納能力、文字和語言表達能力;
—擁有大數據平臺架構的經驗和能力,能夠根據數據及業務需求構建大數據平臺,并隨著需求和技術的進步,不斷演進;
—熟悉主流大數據平臺的組件,擁有較大規模集群的架構經驗。
3、優先考慮:
—有互聯網行業大數據平臺架構實施經驗者優先;
—有相關從業的工作背景經驗者優先考慮。
數據開發崗位職責9
職責
1、負責基于hadoop/spark生態系統、億級別數據的全文檢索,搜索引擎的`產品研發;
2、基于海量用戶行為數據和其他數據,分析和研究數據與實際業務的關聯關系,并與實際業務應用相結合開發;
3、負責大數據分析需求設計和開發,承擔數據抽取、清洗、轉化等數據處理程序開發。
任職要求:
1、熟悉Hadoop/HBase/Spark/Storm/Redis/Kafka/ES/Flume技術及其生態圈,具備相關項目開發經驗,有數據實時計算項目經驗優先;
2、有搜索引擎全文檢索開發經驗,如:elasticsearch、solr;
3、熟悉python、R任意一門開發語言;
4、有SAAS,PAAS企業級應用平臺或者互聯網,金融等大型應用平臺開發經驗優先考慮;
5、本科及以上學歷,計算機/軟件工程/統計學/數學等相關專業,互聯網/金融等行業3年以上工作經驗;
6、擁有良好的代碼習慣,要求結構清晰、命名規范、邏輯性強、代碼冗余率低,代碼注釋清晰;
7、熟悉使用svn,禪道等項目管理工具,有良好的團隊協作開發經驗、
數據開發崗位職責10
職責:
1、負責大數據平臺的基礎環境搭建與性能優化,完成平臺的構建與維護、實時流計算平臺、分布式調度、可視化報表等平臺的架構與研發;
2、對各種開源框架進行深入的代碼剖析和優化;
3、參與大數據技術方案評審;
4、指導初中級大數據工程師工作;
崗位要求:
1、計算機相關專業全日制專科及以上學歷,具有3年或以上的分布式計算平臺研發工作經驗;
2。對大數據相關組件:Hadoop、Spark、Hbase、Hive、Flink、Kafka、Flume等架構與底層實現有深入理解,具備相應的.定制和研發能力,尤其需要精通Flink框架;
3。具備構建穩定的大數據基礎平臺的能力,具備數據收集、數據清洗、數據倉庫建設、實時流計算等系統研發經驗;
4。對技術有熱情,有不錯的數據思維和敏感度,有一定的數據分析能力優先,對深度學習、機器學習有一定的了解優先;
5。工作有計劃性,責任心和執行能力強,具備高度的責任心、誠信的工作作風、優秀溝通能力及團隊精神。
數據開發崗位職責11
崗位職責:
分布式大數據系統開發、計算性能調優、 高性能服務框架設計與開發;
參與項目的架構設計、評審、技術攻堅及優化;
參與系統文檔的撰寫、維護。
任職要求:
本科以上學歷,計算機或相關專業;
3年以上linux后臺開發經驗,有大規模系統開發經驗;
精通http、tcp/ip協議,網絡編程;
熟悉linux操作系統原理,常用工具;
熟悉常用大數據開源組件;
有高并發、大容量后臺服務系統設計經驗;
具有良好的`學習能力、溝通能力、團隊合作意識;
強烈的責任心與主動性,對所負責工作有owner意識,并能自我驅動成長;
對hadoop、flink、spark、lucene等開源項目有大規模應用經驗,contributor或者committer優先。
數據開發崗位職責12
職責:
1.參與傳統數倉和大數據數倉日常開發工作;
2.參與大數據倉庫設計、規劃和開發;
3.參與日常工作的優化,提出建設性意見;
4.負責管理項目,負責板塊內的'資源協調、進度管理、交付管理;
5.參與數據倉庫、數據集市體系架構的設計、規劃與開發,參與大數據、ETL開發,sql性能優化。
任職要求:
1.全日制本科,計算機等相關專業。3年以上數倉開發經驗,有銀行、金融從業經驗者優先。
2.2年以上項目管理經驗,具備PMP證書優先.
3.熟悉oracle/hive/spark,熟悉數據處理和性能優化,有UDF自定義函數、MR開發經驗優先;
4.熟悉常用ETL工具,熟悉常用的Linux指令,熟悉shell/python任意一種腳本語言。
數據開發崗位職責13
職責
1.數據庫安裝、配置、故障處理、備份與恢復;
2.數據庫性能監控與優化、數據庫安全加固、數據庫空間管理等(包括線上、線下環境);
3.負責項目數據ETL整合與數據庫設計;
4.審核數據庫設計方案和SQL語句,對上線數據庫質量進行管理;
5.負責數據庫操作標準化流程制定,并遵照執行;(如數據庫設計規范、數據庫變更管理規范)
6.負責跟進、試用廈門數據組產出的工具、數據整合方案,以及在重慶團隊中推廣使用;
7.提升實施團隊數據庫運維相關技能。
崗位要求
1、計算機或相關專業本科以上學歷,2年以上數據處理工作經驗;
2、精通關系型數據庫體系架構和原理,精通存儲過程、觸發器、動態SQL的編寫;
3、精通數據庫的性能優化及SQL語句的優化;
4、精通MySql/oracle數據庫的規劃、設計、優化及運維;
5、熟悉Linux常用命令,熟悉shell/python/perl(其中一種)腳本開發;
6、熟悉數據庫的負載解決方案,如分庫、分表、主從;
7、高度的'責任心、良好的溝通技巧和團隊合作精神;
數據開發崗位職責14
職責:
1、負責參與數據庫選型、給出數據庫設計方案、優化方案;
2、負責數據庫故障恢復、備份、調優;
3、負責監控數據庫資源消耗情況、數據庫運行日志、故障日志,給出解決方案;
4、負責數據庫安裝和配置管理;
5、負責解決數據庫、數據方面的問題。
任職要求:
1、本科以上學歷,計算機及相關專業;
2、兩年以上的數據庫開發經驗;
3、熟悉oracle或者greenplum等常見關系型數據庫,有開發存儲過程(PL/SQL)的經驗;
4、熟悉SQL調優;
5、熟悉數據庫集群、分庫、分表等操作的`優先考慮;
6、有greenplum數據開發的經驗優先考慮。
數據開發崗位職責15
職責:
1、負責數據庫的安裝、配置、監控、實時備份、恢復和管理;
2、負責數據清理及系統間的.數據遷移;
3、根據需要負責數據庫設計包括表結構、表、索引等的設計;
4、負責編寫SQL、觸發器、存儲過程等;
5、負責原有SQL優化,原有存儲過程維護。
工作要求:
1、2年以上數據庫開發或Java軟件開發經驗;
2、熟練使用Linux系統,熟悉表結構設計、SQL優化,熟練編寫存儲過程;
3、熟悉Oracle、Mysql數據庫運行機制、體系架構;
4、掌握Oracle數據庫維護,能對業務需求和故障及時反饋和處理;
5、具較強的責任心和學習能力,有團隊合作精神、溝通協調能力、承壓能力。
【數據開發崗位職責】相關文章:
數據開發崗位職責15篇11-12
數據庫開發崗位職責10-18
數據開發崗位職責(通用19篇)09-09
數據開發工程師崗位職責(精選20篇)04-25
數據庫開發工程師崗位職責08-28
數據開發工程師崗位職責(通用20篇)09-20
數據庫開發工程師的崗位職責(精選30篇)10-04
數據庫開發工程師崗位職責15篇07-31
數據庫開發工程師崗位職責(15篇)08-18