大數(shù)據(jù)研發(fā)工程師崗位職責12篇

第1篇 空間大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責任職要求

職位描述：

崗位職責:

1、研究空間大數(shù)據(jù)前沿技術(shù)，參與空間大數(shù)據(jù)分析平臺的設計和開發(fā)；

2、與算法工程師對接，參與空間大數(shù)據(jù)分析算法的代碼實現(xiàn)；

3、其它相關(guān)的gis開發(fā)工作；

任職資格:

1、計算機、地理信息等相關(guān)專業(yè)背景，本科及以上學歷；

2、對空間數(shù)據(jù)結(jié)構(gòu)有深刻理解，熟悉空間數(shù)據(jù)庫引擎；

3、扎實的編程基礎，能夠熟練運用java/scala語言；

4、熟悉大數(shù)據(jù)管理系統(tǒng)和分布式計算框架，如：hbase、cassandra、mongodb、spark/flink等；

5、熟悉gis領(lǐng)域主流的分布式數(shù)據(jù)存儲方案，有g(shù)eomesa、geowave、geotrellis、geoserver、geotools、arcgis soe使用經(jīng)驗者優(yōu)先；

6、具備較強的學習創(chuàng)新能力，能夠通過快速學習解決實際問題；

第2篇 大數(shù)據(jù)研發(fā)工程師-廣告系統(tǒng)數(shù)據(jù)平臺職位描述與崗位職責任職要求

職位描述：

工作職責：

1、廣告各類在線業(yè)務的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務開發(fā)與維護；

2、數(shù)據(jù)服務接口及產(chǎn)品需求研發(fā)迭代，代碼review、bug修復及日常服務運維；

3、針對海量數(shù)據(jù)處理和查詢需求，設計適應業(yè)務變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構(gòu)，滿足多樣性的需求；

4、海量日志清洗加工，并抽象出可以多業(yè)務復用的數(shù)據(jù)模型。

任職要求：

1、計算機相關(guān)專業(yè)本科及以上學歷，熟悉hadoop架構(gòu)和工作原理，精通mapreduce編程；精通hive，有hql優(yōu)化經(jīng)驗；

2、熟悉java，python等多種編程技術(shù)，編程能力強，有web服務開發(fā)經(jīng)驗，具備獨立完成模塊開發(fā)能力；

3、理解基本的設計模式，能將業(yè)務需求快速理解成技術(shù)需求；

4、熟練使用mysql，熟練使用elasticsearch、druid者優(yōu)先；熟悉其原理者優(yōu)先；

5、善于溝通，工作積極主動，責任心強，具備良好的團隊協(xié)作能力；

6、具備良好的問題分析與解決能力，有較強學習能力和邏輯思維能力。

額外加分項:：

github等開源社區(qū)貢獻者；

具備大規(guī)模分布式服務設計能力和經(jīng)驗。

第3篇 高級大數(shù)據(jù)研發(fā)工程師（數(shù)據(jù)可視化）職位描述與崗位職責任職要求

職位描述：

崗位職責：

1.負責全公司的數(shù)據(jù)平臺數(shù)據(jù)可視化研發(fā)工作

2.獨立完成數(shù)據(jù)可視化研發(fā)工作

任職要求：

1.計算機、電子通信、數(shù)學、統(tǒng)計或者相關(guān)專業(yè)本科及以上學歷

2.熟練掌握java/python中的一種語言

3.熟悉數(shù)據(jù)可視化開發(fā)，熟悉echarts應用開發(fā)的優(yōu)先

4.熟悉web開發(fā)，熟悉html，js，css

5.熟悉quick bi的優(yōu)先

6.具備良好的團隊合作精神，工作有激情

7.對數(shù)據(jù)敏感，有產(chǎn)品思維的優(yōu)先

第4篇 品牌廣告大數(shù)據(jù)研發(fā)工程師-核心廣告系統(tǒng)職位描述與崗位職責任職要求

職位描述：

工作職責：

1、負責品牌廣告業(yè)務平臺及其相關(guān)系統(tǒng)的研發(fā)

2、負責現(xiàn)有系統(tǒng)的問題分析和改進，提高系統(tǒng)性能，保證系統(tǒng)穩(wěn)定性

3、持續(xù)改進系統(tǒng)架構(gòu)、核心算法或者核心技術(shù)等，保證系統(tǒng)高性能、高可用性和高可擴展性

4、新技術(shù)預研，完成項目的選型和設計，難點公關(guān)

任職要求：

1、本科及以上學歷，一年以上大數(shù)據(jù)系統(tǒng)開發(fā)經(jīng)驗

2、熟悉python語言， 熟練使用linu_

3、對常用的redis、kafka等工具系統(tǒng)有一定的了解

4、有大數(shù)據(jù)集、分布式計算工具(hadoop，spark，hive，storm， es)等應用開發(fā)經(jīng)驗優(yōu)先

5、有良好的團隊合作精神，較強的溝通能力

6、愿意深入了解業(yè)務知識，并能敏銳的發(fā)現(xiàn)業(yè)務痛點

7、有品牌廣告系統(tǒng)、dmp、輿情、指數(shù)平臺方向開發(fā)經(jīng)驗者優(yōu)先

第5篇 高級/資深大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責任職要求

職位描述：

工作職責：

1、負責字節(jié)跳動用戶行為的理解和建模，幫助公司各項業(yè)務滿足用戶需求，提升用戶覆蓋；

2、負責在數(shù)據(jù)建設層面，對用戶隱私進行脫敏處理，保證后續(xù)數(shù)據(jù)研發(fā)過程中保護用戶隱私；

3、探索、挖掘公司各項指標、用戶滿意度、用戶增長上的各項規(guī)律，并利用這些規(guī)律幫助產(chǎn)品提升和擴展，增加用戶滿意度，擴展用戶群體。

任職要求：

1、本科及以上學歷，計算機、統(tǒng)計學、數(shù)學等相關(guān)專業(yè)；

2、強的編程和數(shù)據(jù)工具運用能力，有hadoop，hive，spark，kafka，elasticsearch或者其他的大數(shù)據(jù)工具的使用經(jīng)驗；

3、對數(shù)據(jù)倉庫、數(shù)據(jù)建模有一定認知；有過數(shù)據(jù)使用相關(guān)經(jīng)驗。

第6篇 大數(shù)據(jù)研發(fā)工程師-抖音/火山職位描述與崗位職責任職要求

職位描述：

工作職責：

1、負責抖音/火山等多個業(yè)務線的策略算法建設與優(yōu)化工作；

2、通過海量數(shù)據(jù)，分析與挖掘各種潛在關(guān)聯(lián)，不斷優(yōu)化策略效果，保障用戶體驗；

4、負責實時及離線特征抽取、融合，為數(shù)據(jù)挖掘及策略平臺提供特征服務；

5、負責大數(shù)據(jù)能力在產(chǎn)品功能上的落地，推動產(chǎn)品數(shù)據(jù)化和智能化。

任職要求：

1、計算機等相關(guān)專業(yè)，碩士或以上學歷，3年以上大數(shù)據(jù)、人工智能相關(guān)經(jīng)驗；

2、熟悉hive/hadoop/spark/flink/clickhouse/druid等大數(shù)據(jù)開發(fā)技術(shù)；

3、有良好的業(yè)務和產(chǎn)品sense，執(zhí)行力、推動力強優(yōu)先；

4、有豐富的行業(yè)經(jīng)驗，豐富的專業(yè)知識，獨特的行業(yè)見解，有戰(zhàn)略視野和規(guī)劃能力優(yōu)先；

5、優(yōu)秀的理解溝通能力，崇尚數(shù)據(jù)說話，深信數(shù)據(jù)在驅(qū)動業(yè)務、支撐決策上的價值優(yōu)先。

第7篇 大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責任職要求

職位描述：

工作職責：

1、打造業(yè)界領(lǐng)先的通用數(shù)據(jù)平臺，包括實時數(shù)據(jù)流、數(shù)據(jù)倉庫、調(diào)度系統(tǒng)、查詢引擎，用戶行為分析，abtest 實驗系統(tǒng)等，降低數(shù)據(jù)的使用門檻，實現(xiàn)數(shù)據(jù)的最大價值

2、打造業(yè)界領(lǐng)先的存儲、計算等分布式系統(tǒng)，為海量數(shù)據(jù)和大規(guī)模業(yè)務系統(tǒng)提供可靠的基礎設施

任職要求：

1、熟悉多項大數(shù)據(jù)領(lǐng)域的開源框架，e.g. hadoop， hive， presto， storm， spark， kafka， hbase， redis， rocksdb， elasticsearch， druid， etc.

2、強悍的編碼和 troubleshooting 能力

3、樂于挑戰(zhàn)沒有明顯答案的問題，對新技術(shù)有強烈的學習熱情

第8篇 實時大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術(shù)專家（p6-p8）職位描述與崗位職責任職要求

職位描述：

職責描述：

基于flink開源大數(shù)據(jù)計算平臺，在阿里集團整體業(yè)務場景下，

1. 研發(fā)實時流計算數(shù)據(jù)研發(fā)平臺，支持包括核心電商、云計算、大文娛、創(chuàng)新業(yè)務在內(nèi)的等各個綜合業(yè)務板塊務；

2. 研發(fā)實時olap（elasticsearch，druid）賦能業(yè)務

3. 研發(fā)實時智能化（算法加工程）賦能業(yè)務

任職要求：

1.具備扎實的計算機理論基礎， 對數(shù)據(jù)結(jié)構(gòu)及算法有較強的功底

2.精通java語言編程，具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗

3. 熟悉常見的面向?qū)ο笤O計模式，具備優(yōu)秀的系統(tǒng)架構(gòu)設計能力

4.熟悉hadoop/hbase/flink/spark streaming等開源大數(shù)據(jù)技術(shù)，在開源社區(qū)活躍者優(yōu)先

5.熟悉elasticsearch/druid 等olap開源技術(shù)優(yōu)先

6.具備實際的大數(shù)據(jù)業(yè)務開發(fā)經(jīng)驗以及良好的項目溝通和協(xié)調(diào)能力

7. 具備實時流計算數(shù)據(jù)開發(fā)經(jīng)驗、全棧開發(fā)經(jīng)驗優(yōu)先

第9篇 廣告大數(shù)據(jù)研發(fā)工程師/專家（p6-p8）3職位描述與崗位職責任職要求

職位描述：

職責描述：

社交廣告系統(tǒng)數(shù)據(jù)工程平臺研發(fā)，偏重系統(tǒng)架構(gòu)設計與實現(xiàn)，參加以下一到多項工作：

1. 搭建數(shù)據(jù)倉庫，存儲并處理海量的實時、批量數(shù)據(jù)，滿足廣告業(yè)務的定向、分析和模型特征等業(yè)務需要

2. 建設數(shù)據(jù)發(fā)布系統(tǒng)，將數(shù)據(jù)倉庫的數(shù)據(jù)應用到廣告在線業(yè)務

3. 特征工程工程系統(tǒng)建設，為模型方提供特征數(shù)據(jù)流和特征離線調(diào)研、評估平臺，并保證模型訓練和預測階段的特征線上與線下一致性；

4. 用戶標識映射、畫像數(shù)據(jù)在線服務的開發(fā)與維護；

5. 廣告后臺海量日志數(shù)據(jù)和廣告主數(shù)據(jù)處理平臺；

6. 報表和廣告策略的統(tǒng)計數(shù)據(jù)生成和存儲；

7. 多維透視業(yè)務索引和存儲；

任職要求：

重點大學本科以上學歷，計算機相關(guān)專業(yè)；

具有扎實的數(shù)據(jù)結(jié)構(gòu)和算法功底；

熟練使用 java，scala，c/c++， python；

有海量數(shù)據(jù)處理經(jīng)驗，熟悉 hadoop，spark，hbase，beam等開源框架 ；

有分布式系統(tǒng)，tensorflow等機器學習系統(tǒng)等經(jīng)驗優(yōu)先 ；

有較強學習能力和邏輯思維能力，具備良好的問題分析與解決能力；

善于溝通，工作積極主動，責任心強，具備良好的團隊協(xié)作能力

第10篇 高級實時大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術(shù)專家職位描述與崗位職責任職要求

職位描述：

職責描述：

基于flink開源大數(shù)據(jù)計算平臺，在集團整體業(yè)務場景下，

1. 研發(fā)實時流計算數(shù)據(jù)研發(fā)平臺，支持包括核心電商、云計算、大文娛、創(chuàng)新業(yè)務在內(nèi)的等各個綜合業(yè)務板塊務；

2. 研發(fā)實時olap（elasticsearch，druid）賦能業(yè)務

3. 研發(fā)實時智能化（算法加工程）賦能業(yè)務

任職要求：

1.具備扎實的計算機理論基礎， 對數(shù)據(jù)結(jié)構(gòu)及算法有較強的功底

2.精通java語言編程，具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗

3. 熟悉常見的面向?qū)ο笤O計模式，具備優(yōu)秀的系統(tǒng)架構(gòu)設計能力

4.熟悉hadoop/hbase/flink/spark streaming等開源大數(shù)據(jù)技術(shù)，在開源社區(qū)活躍者優(yōu)先

5.熟悉elasticsearch/druid 等olap開源技術(shù)優(yōu)先

6.具備實際的大數(shù)據(jù)業(yè)務開發(fā)經(jīng)驗以及良好的項目溝通和協(xié)調(diào)能力

7. 具備實時流計算數(shù)據(jù)開發(fā)經(jīng)驗、全棧開發(fā)經(jīng)驗優(yōu)先

第11篇 大數(shù)據(jù)研發(fā)工程師-平臺服務方向職位描述與崗位職責任職要求

職位描述：

工作職責：

1、針對字節(jié)跳動全局性數(shù)據(jù)分析要求，打造行業(yè)領(lǐng)先的數(shù)據(jù)平臺，對全球用戶數(shù)據(jù)，打造高效穩(wěn)定的batch和rt數(shù)據(jù)流；

2、利用大數(shù)據(jù)工具，打造計算，傳輸，分析，監(jiān)控平臺；滿足字節(jié)跳動全球用戶產(chǎn)品的指標計算，多維分析等需求；

3、構(gòu)建高效穩(wěn)定的數(shù)據(jù)服務，支撐字節(jié)跳動全球各重要業(yè)務的用戶增長。

任職要求：

1、計算機、數(shù)學相關(guān)專業(yè)本科及以上學歷，一年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗，數(shù)據(jù)挖掘和bi分析領(lǐng)域優(yōu)先；

2、熟悉多項大數(shù)據(jù)領(lǐng)域的開源框架，e.g. hadoop， hive， presto， storm， spark， kafka， hbase， redis， rocksdb， elasticsearch， druid等；

3、強悍的編碼和學習能力；善于發(fā)現(xiàn)問題，積極探索原因。

第12篇 大數(shù)據(jù)研發(fā)工程師-產(chǎn)品運營方向職位描述與崗位職責任職要求

職位描述：

工作職責：

1、負責企業(yè)級大數(shù)據(jù)平臺的研發(fā)，服務于今日頭條公司內(nèi)外的幾十條產(chǎn)品線；

2、不局限于按部就班的研發(fā)工作，有強烈的產(chǎn)品sense，對用戶體驗敏感，能夠綜合運用技術(shù)/產(chǎn)品/運營方案，提升終端用戶體驗；

3、平臺產(chǎn)品包括但不限于：用戶行為分析，查詢中心，bi報表，元數(shù)據(jù)管理，abtest系統(tǒng)，數(shù)據(jù)開發(fā)套件等；

任職要求：

1、計算機等相關(guān)專業(yè)優(yōu)先，本科及以上學歷；

2、復合型人才，有研發(fā)能力的pm，或有產(chǎn)品運營能力的研發(fā)等均可投遞；

3、做事積極主動，優(yōu)秀的組織協(xié)調(diào)，推進執(zhí)行能力，思路手段靈活，對用戶體驗負責；有數(shù)據(jù)分析，大數(shù)據(jù)研發(fā)，數(shù)據(jù)產(chǎn)品設計，售前售后等經(jīng)驗之一者，優(yōu)先考慮；