大數(shù)據(jù)工程崗位職責16篇

第1篇 大數(shù)據(jù)平臺高級開發(fā)工程師職位描述與崗位職責任職要求

職位描述：

工作職責：

1、負責大數(shù)據(jù)開源組件的調研

2、負責大數(shù)據(jù)平臺自研平臺系統(tǒng)及功能模塊設計與開發(fā)

3、配合架構師及測試按時完成開發(fā)，保證產(chǎn)品正常發(fā)布與迭代

任職要求：

1、本科以上學歷，計算機相關專業(yè)

2、2年以上大數(shù)據(jù)平臺開發(fā)經(jīng)驗

3、精通java，熟悉linu_系統(tǒng)，深入理解并使用主流技術框架，如springboot、mybatis、mq、redis、zk、spring cloud等技術棧，具備豐富的分布式系統(tǒng)的研發(fā)經(jīng)驗

4、熟悉hadoop生態(tài)圈其他系統(tǒng)，包括hive，pig，hbase，spark，kafka，oozie，sqoop，flume，zookeeper， strom，flink，并了解其原理

5、熟練掌握各類數(shù)據(jù)結構與算法，具有較強的編碼能力

6、具有良好的團隊合作精神和表達溝通能力

7、有數(shù)據(jù)中臺，數(shù)據(jù)服務平臺開發(fā)經(jīng)驗，熟悉hadoop生態(tài)圈組件者優(yōu)先

第2篇 大數(shù)據(jù)平臺工程師職位描述與崗位職責任職要求

職位描述：

職責描述：

1、參與公司數(shù)據(jù)平臺架構設計，負責大數(shù)據(jù)平臺和數(shù)據(jù)倉庫相關建設；2、依據(jù)公司的大數(shù)據(jù)技術發(fā)展路線，負責基于hadoop生態(tài)系統(tǒng)和mpp數(shù)據(jù)庫的大規(guī)模數(shù)據(jù)平臺的研發(fā)及數(shù)據(jù)倉庫建設，提供可靠的數(shù)據(jù)存儲和訪問能力；3、負責公司大數(shù)據(jù)平臺和數(shù)據(jù)倉庫的搭建、開發(fā)、管理、監(jiān)控和性能調優(yōu)，保證集群高效穩(wěn)定運行；4、規(guī)劃與開發(fā)離線數(shù)據(jù)平臺系統(tǒng)，處理海量數(shù)據(jù)，優(yōu)化存儲和計算架構的性能；5、負責數(shù)據(jù)平臺技術難點攻關、技術選型評估，參與開發(fā)流程的討論與優(yōu)化；6、參與公司數(shù)據(jù)治理策略等的制訂和實施；7、負責協(xié)助產(chǎn)品經(jīng)理進行數(shù)據(jù)倉庫相關的需求分析、建模、寬表設計等工作；

8、負責系統(tǒng)核心代碼編寫、代碼審核和重構，指導和培訓數(shù)據(jù)工程師、不斷進行系統(tǒng)優(yōu)化；

任職要求：

1、本科以上學歷，5年以上大數(shù)據(jù)研發(fā)經(jīng)驗，帶領過10人以上的大數(shù)據(jù)團隊； 2、有大型分布式系統(tǒng)設計經(jīng)驗，負責過海量數(shù)據(jù)平臺上高可用、高性能分布式系統(tǒng)的架構設計；3、熟悉大數(shù)據(jù)開發(fā)框架，熟悉hadoop，hbase，spark等及業(yè)界主流流處理平臺如，如storm，flunk，sparkstreaming等之一；4、熟悉greenplum等數(shù)據(jù)倉庫技術，并有廣泛的實踐經(jīng)驗，具備維護和解決生產(chǎn)問題的能力；5、熟悉掌握分布式存儲和nosql數(shù)據(jù)庫技術（如monogodb、redis等），有實際生產(chǎn)項目應用經(jīng)驗；6、熟練掌握java，python，scalar中的至少一種編程語言，掌握常見的數(shù)據(jù)結構，算法，了解軟件工程、敏捷開發(fā)等知識，熟悉常用設計模式; 7、理解soa，微服務，中間件等paas相關的關鍵理念與技術，并對其有廣泛的實踐與應用經(jīng)驗，樂于。8、有民航、電子商務、風控等大數(shù)據(jù)設計和從業(yè)經(jīng)驗者優(yōu)先。

第3篇 大數(shù)據(jù)開發(fā)工程師/專家（p6-p8）3職位描述與崗位職責任職要求

職位描述：

職責描述：

1.負責時空位置大數(shù)據(jù)對外接口后臺和服務框架的開發(fā)和運營；

2.負責時空位置大數(shù)據(jù)數(shù)據(jù)中、后臺的建設以及數(shù)據(jù)和服務安全方面的建設；

任職要求：

1.重點大學本科以上學歷，計算機及相關專業(yè)；

2.3年以上相關工作經(jīng)驗，精通算法與數(shù)據(jù)結構，精通c/c++編程語言；

3.精通linu_、uni_編程環(huán)境，熟悉數(shù)據(jù)庫；

4.精通網(wǎng)絡編程，有分布式系統(tǒng)開發(fā)經(jīng)驗，有大平臺開發(fā)經(jīng)驗優(yōu)先；

5.熟悉gis和時空大數(shù)據(jù)處理和管理，有相關工作經(jīng)驗者優(yōu)先，

6.具備優(yōu)秀的獨立解決問題能力， 善于團隊合作，溝通良好，有一定的抗壓能力；

第4篇 大數(shù)據(jù)主任工程師職位描述與崗位職責任職要求

職位描述：

職責描述：

1. 負責客戶業(yè)務需求、數(shù)據(jù)分析需求的調研、收集與分析;

2. 負責 kyligence enterprise 大數(shù)據(jù)平臺整體架構和數(shù)據(jù)架構設計;

3. 負責技術設計及技術實現(xiàn)規(guī)范編制，指導開發(fā)團隊進行項目設計、項目實現(xiàn)及技術匯報;

4. 負責項目重難點模塊的功能設計和難點攻堅;

5. 參與 kyligence enterprise/apache kylin 的應用設計、開發(fā)、測試及優(yōu)化工作。

任職要求：

1. 計算機相關專業(yè)，本科及以上學歷;

2. 有 3 年以上工作經(jīng)驗，其中包括2年以上大數(shù)據(jù)平臺架構和系統(tǒng)設計經(jīng)驗;

3. 精通 hadoop、hive、hbase原理，熟悉大數(shù)據(jù)生態(tài)技術，如storm、spark、flink、kafka、zookeeper等，有大規(guī)模集群架構、開發(fā)及運維經(jīng)驗，能根據(jù)業(yè)務場景設計合適的技術棧完成業(yè)務需求

4. 熟練sql 語言，掌握 oracle、db2、mysql 等一種或多種數(shù)據(jù)庫系統(tǒng)的使用，有一定的 sql 性能調優(yōu)經(jīng)驗;

5. 至少熟悉 java，scala，python，shell等編程語言中的2種;

6. 優(yōu)秀的分析和解決問題的能力，對挑戰(zhàn)性問題充滿激情;

7. 具備良好的團隊合作精神，較強的溝通能力，具備良好的技術領導能力;

8. 有數(shù)據(jù)倉庫背景或者 apache kylin 的開發(fā)經(jīng)驗者優(yōu)先考慮;

第5篇 系統(tǒng)運維工程師（大數(shù)據(jù)方向）職位描述與崗位職責任職要求

職位描述：

1、負責公園業(yè)務系統(tǒng)的部署和日常更新，日常監(jiān)控和維護；

2、熟悉各辦公系統(tǒng)（如oa、勞動力系統(tǒng)）維護等常規(guī)工作；

3、負責oa系統(tǒng)表單及相關流程的建立及維護，有泛微系統(tǒng)的應用開發(fā)、維護優(yōu)先考慮接；

4、負責軟件系統(tǒng)升級、維護和優(yōu)化，及時發(fā)現(xiàn)潛在問題，保障系統(tǒng)正常運行；

5、協(xié)助制定和改進部署、維護流程，提高服務運行質量；；

6、制定數(shù)據(jù)庫操作規(guī)范和數(shù)據(jù)保密制度，并對數(shù)據(jù)庫操作進行嚴格記錄。

任職資格：

1.計算機相關專業(yè)本科或以上學歷，2年以上工作經(jīng)驗；

2.在大型企業(yè)有1年以上中型數(shù)據(jù)庫管理和維護工作經(jīng)驗，熟悉泛微或勞動力產(chǎn)品的優(yōu)先；

3.擁有大型主題樂園工作經(jīng)驗者優(yōu)先，熟悉票務系統(tǒng)、商餐系統(tǒng)、停車場、酒店等系統(tǒng)優(yōu)先考慮；；

4.熟悉mysql、oracle數(shù)據(jù)庫，掌握sql語句，了解oracle的安裝與維護；

5.掌握tomcat、dubbo、redis、ngin_、mq等中間件及相關配置；

6.具有優(yōu)秀的團隊合作和溝通協(xié)作能力、有責任心；

第6篇 高級java開發(fā)工程師（大數(shù)據(jù)方向）職位描述與崗位職責任職要求

職位描述：

崗位職責：

1、負責智能推薦系統(tǒng)后端開發(fā)；

2、負責詳細設計、編碼工作，確保項目進度、質量；

3、參與產(chǎn)品需求的溝通、討論；

4、應對高并發(fā)、高可靠性等帶來的各種技術挑戰(zhàn)；

崗位要求：

1、5年服務端開發(fā)經(jīng)驗，本科及以上學歷；

2、扎實的java基礎，熟悉jvm、java io，掌握并發(fā)編程、網(wǎng)絡編程及常用數(shù)據(jù)結構；

3、深入了解spring、hibernate、tomcat等開源架構，并對其運行原理有較好的理解；

4、熟悉面向對象開發(fā)，具備領域模型抽象能力，熟悉常用設計模式；

5、熟悉分布式、緩存、消息等機制；有高并發(fā)，高性能系統(tǒng)經(jīng)驗，熟悉微服務架構設計；

6、熟練掌握mysql等關系型數(shù)據(jù)庫，掌握mongodb、hbase等nosql數(shù)據(jù)庫，并有性能調優(yōu)經(jīng)驗；

7、熟悉hadoop、hive、hbase、storm、kafka等大數(shù)據(jù)處理技術；

8、有強烈技術熱情和鉆研精神，注重代碼質量，有良好的軟件工程知識和編碼規(guī)范意識；

9、具備較強的責任心，具備良好的溝通能力、團隊協(xié)作和抗壓能力，做事精益求精；

第7篇 增長大數(shù)據(jù)工程師職位描述與崗位職責任職要求

職位描述：

工作職責：

負責用戶增長方向的離線和實時數(shù)據(jù)倉庫體系建設工作，提升數(shù)據(jù)分析工作的效率；

結合內外部數(shù)據(jù)，構建完整的用戶生命周期行為數(shù)據(jù)體系；

構建的支持用戶增長的數(shù)據(jù)分析產(chǎn)品，支持快速的深度分析海量ab測試實驗結果；

深度分析用戶行為、行業(yè)情況和ab測試數(shù)據(jù)，利用數(shù)據(jù)挖掘算法對多維數(shù)據(jù)進行關聯(lián)分析。

任職要求：

本科及以上學歷，計算機、統(tǒng)計、數(shù)學、通信等理工類相關專業(yè)；

熟悉數(shù)據(jù)倉庫理論和技術體系，熟練掌握sql/hive/mapreduce/spark/flink等大規(guī)模數(shù)據(jù)處理技術；

至少精通（python/java/scala/c++/r）一門編程語言，熟練運用各種常用算法和數(shù)據(jù)結構 ；

有分布式計算、分布式存儲、數(shù)據(jù)挖掘經(jīng)驗者優(yōu)先，有開發(fā)設計用戶畫像方面經(jīng)驗者優(yōu)先；

熟悉實時計算框架和相關處理技術者優(yōu)先；

熟悉growth hacking，或對此方向有興趣者優(yōu)先。

第8篇 大數(shù)據(jù)可視化工程師崗位職責

大數(shù)據(jù)可視化工程師 萬得 萬得信息技術股份有限公司,wind資訊,萬得,萬得資訊,上海萬得,萬得 工作職責:

1、和大數(shù)據(jù)工程師、數(shù)據(jù)科學家共同工作,探索可視化在金融業(yè)務場景的技術方案和產(chǎn)品應用;

2、開發(fā)展示為主的數(shù)據(jù)大屏和業(yè)務分析為主的數(shù)據(jù)產(chǎn)品以及在移動端數(shù)據(jù)可視化項目;

3、負責數(shù)據(jù)產(chǎn)品/可視化大屏的前端架構和應用后臺及通用組件的開發(fā)

任職要求:

1、本科及以上學歷,功底扎實,視野開闊,對新技術具有敏感和熱情;

2、工程能力強,熟悉a_ure rp等設計工具,有較復雜的 webapp 類型產(chǎn)品前端開發(fā)經(jīng)驗;

3、熟悉數(shù)據(jù)可視化開源方案,有數(shù)據(jù)分析場景/數(shù)據(jù)可視化經(jīng)驗者(echarts/highcharts/d3)優(yōu)先;

4、技術跟隨前沿,熟悉servlet,html5,javascript,json,了解node/angularjs/react;

5、熟悉web后臺性能優(yōu)化和前端展示技術;

5、熟悉1-2種分析型數(shù)據(jù)庫(如db/hive/neo4j)者優(yōu)先;

6、性格要求:性格開朗,勇于挑戰(zhàn);良好的人際關系,對技術追求工匠精神。

第9篇 大數(shù)據(jù)建模工程師職位描述與崗位職責任職要求

職位描述：

工作職責：

1. 運用python、r、sql等工具，根據(jù)監(jiān)管部門與金融機構需求進行大數(shù)據(jù)模型設計與開發(fā)；

2. 基于模型部署、測試、實施及模型應用效果監(jiān)控工作，進行模型調優(yōu)與維護；

3. 撰寫大數(shù)據(jù)建模項目可行性方案、建模分析報告；

4. 根據(jù)實際的建模業(yè)務，負責提出并反饋流程、策略、人員等問題。

任職要求：

1、應用數(shù)學、統(tǒng)計、機器學習、計算機及相關專業(yè)，國內外知名院校碩士以上學歷需3-5年工作經(jīng)驗，博士及以上學歷需1年工作經(jīng)驗；

2、具有數(shù)學建?；虼髷?shù)據(jù)建模實際項目經(jīng)驗，熟悉數(shù)學建模與優(yōu)化算法設計，掌握邏輯回歸、決策樹、神經(jīng)網(wǎng)絡等機器學習算法；

3、熟練運用python、r、matlab等常用數(shù)學建模與分析工具；

4、熟悉數(shù)據(jù)庫結構，熟練運用sql等數(shù)據(jù)庫語言，熟悉數(shù)據(jù)清洗、預處理與特征工程，熟悉

hadoop生態(tài)、spark結構，c#語言；

5、具有扎實的統(tǒng)計分析功底，快速精準的分析能力，能夠處理大量數(shù)據(jù)進行建模；

6、具有良好的業(yè)務問題分析，模型抽象能力和創(chuàng)新能力；

7、敬業(yè)、誠信，良好的職業(yè)素養(yǎng)。

第10篇 大數(shù)據(jù)架構高級工程師職位描述與崗位職責任職要求

職位描述：

工作職責：

1、打造業(yè)界領先的存儲、計算、調度、監(jiān)控等基礎設施；

2、參與存儲、計算、devinfra、監(jiān)控當中的一個或多個方向。

任職要求：

1、掌握分布式系統(tǒng)原理，對存儲、計算、調度、監(jiān)控、消息隊列、集群管理中的一項或多項有深入的理解和認識；

2、樂于挑戰(zhàn)沒有明顯答案的問題，能快速理解業(yè)務場景，從具體問題中抽象出通用的解決方案；

3、存儲方向：對 hdfs， rocksdb， ceph， hbase， kafka 的一項或多項有經(jīng)驗者優(yōu)先；

4、計算方向：對 yarn， spark， flink， hive 的一項或多項有經(jīng)驗者優(yōu)先；

5、devinfra方向：對 docker， mesos， kubernetes 的一項或多項有經(jīng)驗者優(yōu)先；

6、監(jiān)控方向：對 opentsdb， influ_db， prometheus， falcon 的一項或多項有經(jīng)驗者優(yōu)先。

第11篇 大數(shù)據(jù)開發(fā)工程師 [數(shù)倉方向]職位描述與崗位職責任職要求

職位描述：

工作職責：

1、使用etl工具（如sqoop、kettle）進行數(shù)據(jù)加工、清洗等流程；

2、根據(jù)業(yè)務需求，進行數(shù)倉日常數(shù)據(jù)分析、數(shù)據(jù)報表開發(fā)；

3、使用hive進行數(shù)據(jù)處理，及數(shù)據(jù)模型構建；

4、具備良好的分析問題和解決問題的能力；

5、具備較強的溝通能力和邏輯表達能力，具備良好的團隊合作精神和主動溝通意識；

任職要求：

1、計算機相關專業(yè)本科及以上學歷；

2、熟練使用sql（mysql / oracle）；

3、熟練數(shù)據(jù)庫/數(shù)據(jù)倉庫分層設計、寬表設計、星型模型設計等；

4、熟練etl工具、sqoop、kettle、spark等；

5、熟悉hadoop、hive、hdfs等常用大數(shù)據(jù)組件；

6、有互聯(lián)網(wǎng)業(yè)務分布式數(shù)據(jù)倉庫、cube、大數(shù)據(jù)數(shù)據(jù)分析等相關經(jīng)驗者加分；

第12篇 大數(shù)據(jù)基礎架構工程師（hadoop）職位描述與崗位職責任職要求

職位描述：

工作職責：

1、打造業(yè)界領先的大數(shù)據(jù)基礎設施，包括數(shù)據(jù)接入，同步，存儲、計算，查詢等環(huán)節(jié)的分布式系統(tǒng)，為海量數(shù)據(jù)和大規(guī)模業(yè)務系統(tǒng)提供可靠的基礎設施；

2、與開源社區(qū)保持交流，發(fā)現(xiàn)對業(yè)務場景有幫助的特性并引入生產(chǎn)環(huán)境，或將經(jīng)內部驗證的特性貢獻到社區(qū)；

3、承擔千臺規(guī)模集群的管理工作，與業(yè)務一起解決性能優(yōu)化、容量規(guī)劃、預算審計等問題，保障集群高效穩(wěn)定經(jīng)濟運行；

任職資格：

1、計算機基礎扎實，熟悉常用數(shù)據(jù)結構和算法，具備較強的邏輯思維能力和編碼能力；

2、掌握分布式系統(tǒng)原理，對存儲、計算、消息隊列、資源管理，數(shù)據(jù)同步等中的一項或多項有深入的理解和認識；

3、樂于挑戰(zhàn)沒有明顯答案的問題，能快速理解業(yè)務場景，從具體問題中抽象出通用的解決方案；

4，熟悉hadoop， hbase， zookeeper，flume，k8s等基礎服務中的一項或多項；

5、有kafka或者同類型技術設計開發(fā)及集群管理經(jīng)驗者優(yōu)先。

第13篇 大數(shù)據(jù)工程師-流式計算職位描述與崗位職責任職要求

職位描述：

崗位職責：

1.負責對核心業(yè)務數(shù)據(jù)實現(xiàn)數(shù)據(jù)的自動化/半自動化抽取、清洗、轉化、標注等工作；

2.負責根據(jù)需求建立數(shù)據(jù)模型、進行全網(wǎng)數(shù)據(jù)在線抽取分析；

3.負責算法的工程化、產(chǎn)品化工作；關注機器學習、數(shù)據(jù)挖掘、人工智能等方向前沿研究，并能將具體場景建模后與之結合快速工程化并落地；

4.完成各種面向業(yè)務目標的數(shù)據(jù)模型的定義和應用開發(fā)規(guī)范的制定，并保證數(shù)據(jù)質量；

5.負責大數(shù)據(jù)計算平臺的研發(fā)工作。

任職要求：

1.計算機、信息系統(tǒng)、數(shù)學或相近專業(yè)本科以上學歷，4年以上軟件研發(fā)經(jīng)驗；

2.精通spark／hadoop/hive/hbase/并有實戰(zhàn)經(jīng)驗；

3.有scala， java， python等開發(fā)經(jīng)驗，精通sql；

4.有海量在線、離線數(shù)據(jù)分析系統(tǒng)設計和開發(fā)經(jīng)驗；

5.精通主流數(shù)據(jù)挖掘算法及其原理，能根據(jù)業(yè)務場景，建立挖掘模型，選擇最合適和高效的算法并實現(xiàn)；

6.需要有責任心， 工作積極主動， 思路清晰，擅長溝通、有團隊合作精神。

第14篇 大數(shù)據(jù)etl工程師職位描述與崗位職責任職要求

職位描述：

崗位職責：

負責etl設計、模型設計、開發(fā)、技術支持等工作，并保證數(shù)據(jù)安全、及時、穩(wěn)定、可恢復

任職要求：

1、3年及以上數(shù)據(jù)處理（etl）開發(fā)經(jīng)驗，能獨立完成數(shù)據(jù)處理開發(fā)工作

2、熟悉mysql/oracle等標準數(shù)據(jù)庫，熟練上述數(shù)據(jù)庫的開發(fā)

3、有hadoop和hivesql的使用經(jīng)驗

4、熟悉etl設計，熟悉數(shù)據(jù)倉庫的架構、開發(fā)規(guī)范和流程

5、熟悉至少一種etl開發(fā)工具，如datastage，informatica， kettle等

6、具備數(shù)據(jù)倉庫實施經(jīng)驗者優(yōu)先

福利待遇：

試用期全額工資、六險一金、體檢、年假、節(jié)假日禮品等

第15篇 大數(shù)據(jù)云計算工程師崗位職責

高級java開發(fā)工程師(云計算大數(shù)據(jù)方向) 中軟國際科技 中軟國際科技服務有限公司,中軟國際,中軟國際科技,中軟國際科技服務,中軟 職責描述:

1、負責/參與應用系統(tǒng)平臺設計、重構、優(yōu)化,主導/參與技術難題攻關;

2、負責并參與系統(tǒng)需求分析、功能模塊詳細設計,完成系統(tǒng)業(yè)務功能實現(xiàn)、測試及維護工作;

3、負責編寫相應的需求、設計與技術文檔,向系統(tǒng)使用者提供技術支持服務;

4、參與線上系統(tǒng)環(huán)境的升級、運維監(jiān)控、性能調優(yōu);

5、推動跟進業(yè)務線需求,為改善系統(tǒng)的功能積極提出建議。

任職要求:

1、3以上java語言開發(fā)經(jīng)驗,基礎扎實, 熟練使用springmvc框架進行開發(fā);

2、對多線程編程,線程安全等有較深理解. 能夠熟練使用線程池等常用功能;

3、熟練使用jpa,hibernate,mybatis中的一種或多種持久層框架;

4、熟練使用sql的crud命令;

5、具有庫表結構設計能力, 并且有一定的sql開發(fā)及優(yōu)化能力。

第16篇 資深大數(shù)據(jù)工程師職位描述與崗位職責任職要求

職位描述：

【崗位職責】：

1、參與公司數(shù)據(jù)平臺架構設計，負責大數(shù)據(jù)平臺和數(shù)據(jù)倉庫相關建設；

2、依據(jù)公司的大數(shù)據(jù)技術發(fā)展路線，負責基于hadoop生態(tài)系統(tǒng)和mpp數(shù)據(jù)庫的大規(guī)模數(shù)據(jù)平臺的研發(fā)及數(shù)據(jù)倉庫建設，提供可靠的數(shù)據(jù)存儲和訪問能力；

3、負責公司大數(shù)據(jù)平臺和數(shù)據(jù)倉庫的搭建、開發(fā)、管理、監(jiān)控和性能調優(yōu)，保證集群高效穩(wěn)定運行；

4、規(guī)劃與開發(fā)離線數(shù)據(jù)平臺系統(tǒng)，處理海量數(shù)據(jù)，優(yōu)化存儲和計算架構的性能；

5、負責數(shù)據(jù)平臺技術難點攻關、技術選型評估，參與開發(fā)流程的討論與優(yōu)化；

6、參與公司數(shù)據(jù)治理策略等的制訂和實施；

7、負責協(xié)助產(chǎn)品經(jīng)理進行數(shù)據(jù)倉庫相關的需求分析、建模、寬表設計等工作；

8、負責系統(tǒng)核心代碼編寫、代碼審核和重構，指導和培訓數(shù)據(jù)工程師、不斷進行系統(tǒng)優(yōu)化；

【任職資格】：

1、本科以上學歷，5年以上大數(shù)據(jù)研發(fā)經(jīng)驗，帶領過10人以上的大數(shù)據(jù)團隊；

2、有大型分布式系統(tǒng)設計經(jīng)驗，負責過海量數(shù)據(jù)平臺上高可用、高性能分布式系統(tǒng)的架構設計；

3、熟悉大數(shù)據(jù)開發(fā)框架，熟悉hadoop，hbase，spark等及業(yè)界主流流處理平臺如，如storm，flunk，sparkstreaming等之一；

4、熟悉greenplum等數(shù)據(jù)倉庫技術，并有廣泛的實踐經(jīng)驗，具備維護和解決生產(chǎn)問題的能力；

5、熟悉掌握分布式存儲和nosql數(shù)據(jù)庫技術（如monogodb、redis等），有實際生產(chǎn)項目應用經(jīng)驗；

6、熟練掌握java，python，scalar中的至少一種編程語言，掌握常見的數(shù)據(jù)結構，算法，了解軟件工程、敏捷開發(fā)等知識，熟悉常用設計模式

7、理解soa，微服務，中間件等paas相關的關鍵理念與技術，并對其有廣泛的實踐與應用經(jīng)驗，樂于。

8、有民航、電子商務、風控等大數(shù)據(jù)設計和從業(yè)經(jīng)驗者優(yōu)先。