- 目錄
-
第1篇 中級(jí)大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1、參與公司商業(yè)智能平臺(tái)的研發(fā)工作;
2、參與公司商業(yè)智能平臺(tái)的升級(jí)改造工作,包括運(yùn)維工作。
任職要求:
1、正規(guī)院校本科及以上學(xué)歷,軟件、計(jì)算機(jī)、通信、信息安全、網(wǎng)絡(luò)工程等相關(guān)專業(yè);
2、良好的java開發(fā)背景,熟悉spring/mybatis技術(shù)體系;
3、良好的sql功底,熟悉mysql或oracle數(shù)據(jù)庫;
4、熟悉linu_;
5、了解開源pentaho產(chǎn)品,包括prd、mondrian、saiku、kettle等;
6、熟悉hadoop、hive、hbase、storm、spark等大數(shù)據(jù)平臺(tái);
7、溝通能力強(qiáng),有較強(qiáng)的學(xué)習(xí)能力,有較強(qiáng)的責(zé)任心與良好的團(tuán)隊(duì)協(xié)作能力。
第2篇 高級(jí)大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1. 基于公司大數(shù)據(jù)產(chǎn)品進(jìn)行數(shù)據(jù)開發(fā),包括數(shù)據(jù)的采集,清洗,預(yù)處理,存儲(chǔ),建模,分析挖掘等
2. 根據(jù)業(yè)務(wù)用戶需要分析數(shù)據(jù),提供數(shù)據(jù)支持
3. 參與公司大數(shù)據(jù)產(chǎn)品的運(yùn)維和監(jiān)控,保障數(shù)據(jù)質(zhì)量和服務(wù)穩(wěn)定性
任職要求:
1. 具備本科以上學(xué)歷, 計(jì)算機(jī), 軟件以及相關(guān)專業(yè), 5年以上大數(shù)據(jù)開發(fā)經(jīng)驗(yàn)
2. 熟悉數(shù)據(jù)倉庫維度建模, 并能根據(jù)客戶需求進(jìn)行數(shù)據(jù)開發(fā), 向模型更新數(shù)據(jù)
3. 使用過至少一種以上的etl工具
4. 熟練掌握java, 對hadoop相關(guān)的技術(shù)和組件(hdfs, mr, hbase, hive, spark, storm, kafka等)有全面深入了解
5. 熟練掌握shell或者python中的一種
6. 具備spark開發(fā)經(jīng)驗(yàn)者優(yōu)先
7. 具備實(shí)時(shí)計(jì)算(kafka+storm/spark streaming) 經(jīng)驗(yàn)者優(yōu)先
8. 具備數(shù)據(jù)分析和數(shù)據(jù)挖掘方面經(jīng)驗(yàn)者優(yōu)先
第3篇 數(shù)據(jù)開發(fā)工程師/python/c++(p6-p7)3職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
'負(fù)責(zé)內(nèi)部數(shù)據(jù)分析平臺(tái)建設(shè);
開發(fā)數(shù)據(jù)分析算法,提升計(jì)算效率和準(zhǔn)確率;
對平臺(tái)進(jìn)行運(yùn)營,滿足用戶需求。'
任職要求:
'計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷,3年以上工作經(jīng)驗(yàn);
精通python, c/c++開發(fā),熟悉的常見的設(shè)計(jì)模式;
精通spark,hadoop,es 等大數(shù)據(jù)平臺(tái)的原理,做過大數(shù)據(jù)分析平臺(tái)項(xiàng)目,對性能調(diào)優(yōu)有經(jīng)驗(yàn);
熟悉mysql,postgresql,mogodb,redis等數(shù)據(jù)管理系統(tǒng);
擁有良好的發(fā)現(xiàn)、分析與解決問題的能力,責(zé)任感強(qiáng)、具有團(tuán)隊(duì)精神與服務(wù)意識(shí);
具有良好的學(xué)習(xí)能力,對互聯(lián)網(wǎng)的新技術(shù)有很強(qiáng)求知欲望。'
第4篇 健康科技中心-高級(jí)大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職位描述:
1. 基于hadoop生態(tài)系統(tǒng)進(jìn)行大數(shù)據(jù)平臺(tái)建設(shè);
2. 負(fù)責(zé)各業(yè)務(wù)條線相關(guān)指標(biāo)數(shù)據(jù)的數(shù)據(jù)建模
3. 負(fù)責(zé)基于sqoop,hive、spark、sparksql、mysql進(jìn)行大數(shù)據(jù)開發(fā)
4. 負(fù)責(zé)離線運(yùn)算、實(shí)時(shí)計(jì)算平臺(tái)項(xiàng)目的設(shè)計(jì)、開發(fā)及運(yùn)維
5. 負(fù)責(zé)對數(shù)據(jù)平臺(tái)進(jìn)行性能調(diào)優(yōu)
任職要求:
1.統(tǒng)招本科或以上學(xué)歷,6年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗(yàn);
2.熟練掌握shell、python開發(fā)語言;
3.熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理,有相關(guān)的調(diào)優(yōu)、運(yùn)維、開發(fā)經(jīng)驗(yàn);
4.熟練掌握mysql數(shù)據(jù)庫集群;
5. 精通主流etl開發(fā)工具,如:informatica、data services、kettle;精通主流調(diào)度工具,如:azkaban, oozie;
6.有數(shù)據(jù)倉庫、分析系統(tǒng)、用戶畫像等產(chǎn)品開發(fā)經(jīng)驗(yàn)者優(yōu)先;
7.有較強(qiáng)的數(shù)據(jù)和業(yè)務(wù)結(jié)合能力;
8.有醫(yī)療或者大健康背景優(yōu)先;
9.有較強(qiáng)的獨(dú)立、主動(dòng)的學(xué)習(xí)能力,良好的溝通表達(dá)能力。
第5篇 bi數(shù)據(jù)開發(fā)工程師崗位職責(zé)
大數(shù)據(jù)bi開發(fā)工程師 【崗位職責(zé)】:
1、負(fù)責(zé)業(yè)務(wù)相關(guān)指標(biāo)的梳理和計(jì)算;
2、負(fù)責(zé)數(shù)據(jù)倉庫模型設(shè)計(jì)和開發(fā);
3、負(fù)責(zé)數(shù)據(jù)倉庫 etl 開發(fā);
4、上級(jí)交辦的其他任務(wù).
【任職要求】:
1、本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè);
2、3 年以上數(shù)據(jù)倉庫開發(fā)經(jīng)驗(yàn);
3、熟悉數(shù)據(jù)倉庫理論,能夠根據(jù)業(yè)務(wù)需求進(jìn)行數(shù)據(jù)倉庫設(shè)計(jì)開發(fā);
4、熟悉 sql 開發(fā)并能夠進(jìn)行優(yōu)化;
5、熟練掌握 hive 開發(fā),熟悉 hadoop 生態(tài)相關(guān)工具者優(yōu)先;
6、熟悉 shell,python 者優(yōu)先考慮;
6、喜歡鉆研,善于溝通,有團(tuán)隊(duì)合作精神。 【崗位職責(zé)】:
1、負(fù)責(zé)業(yè)務(wù)相關(guān)指標(biāo)的梳理和計(jì)算;
2、負(fù)責(zé)數(shù)據(jù)倉庫模型設(shè)計(jì)和開發(fā);
3、負(fù)責(zé)數(shù)據(jù)倉庫 etl 開發(fā);
4、上級(jí)交辦的其他任務(wù).
【任職要求】:
1、本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè);
2、3 年以上數(shù)據(jù)倉庫開發(fā)經(jīng)驗(yàn);
3、熟悉數(shù)據(jù)倉庫理論,能夠根據(jù)業(yè)務(wù)需求進(jìn)行數(shù)據(jù)倉庫設(shè)計(jì)開發(fā);
4、熟悉 sql 開發(fā)并能夠進(jìn)行優(yōu)化;
5、熟練掌握 hive 開發(fā),熟悉 hadoop 生態(tài)相關(guān)工具者優(yōu)先;
6、熟悉 shell,python 者優(yōu)先考慮;
6、喜歡鉆研,善于溝通,有團(tuán)隊(duì)合作精神。
第6篇 阿里健康-合資公司-大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1、負(fù)責(zé)公司數(shù)據(jù)平臺(tái)項(xiàng)目的etl設(shè)計(jì)、實(shí)現(xiàn)以及優(yōu)化。
2、負(fù)責(zé)etl流程優(yōu)化,關(guān)鍵問題解決;
3、研究醫(yī)院信息化數(shù)據(jù),負(fù)責(zé)數(shù)據(jù)建模、數(shù)據(jù)存儲(chǔ)設(shè)計(jì);
4、使用etl技術(shù)對醫(yī)院信息系統(tǒng)數(shù)據(jù)進(jìn)行提取、清洗、轉(zhuǎn)換和整合;
5、負(fù)責(zé)基于hadoop/spark生態(tài)的大數(shù)據(jù)離線/實(shí)時(shí)處理平臺(tái)開發(fā);
6、負(fù)責(zé)基于阿里云的ma_compute的大數(shù)據(jù)離線處理平臺(tái)開發(fā);
7、負(fù)責(zé)數(shù)據(jù)源調(diào)研、入庫、開發(fā)的全流程工作,并保證數(shù)據(jù)質(zhì)量;
崗位要求:
1、有2年以上醫(yī)療行業(yè)數(shù)據(jù)建模經(jīng)驗(yàn);了解數(shù)據(jù)建模方法論,并且在項(xiàng)目中實(shí)踐甚至優(yōu)化擴(kuò)展;有大型項(xiàng)目建模經(jīng)驗(yàn)優(yōu)先;對數(shù)據(jù)模型有獨(dú)到理解;
2、熟悉大數(shù)據(jù)平臺(tái),了解hadoop、hive、hbase,有大型數(shù)據(jù)中心運(yùn)維經(jīng)驗(yàn)或?qū)嵤┙?jīng)驗(yàn)者優(yōu)先;
3、2年以上醫(yī)院業(yè)務(wù)信息化實(shí)施開發(fā)經(jīng)歷優(yōu)先 ;有his、emr開發(fā)經(jīng)驗(yàn)優(yōu)先;
4、有數(shù)據(jù)倉庫etl經(jīng)驗(yàn),對調(diào)度、元數(shù)據(jù)、數(shù)據(jù)質(zhì)量等有一定理解;
5、有良好的邏輯思維能力,主動(dòng)思考,善于學(xué)習(xí),與團(tuán)隊(duì)溝通無障礙;
6、熟悉java,python,shell,scala等任一種開發(fā)語言;
7、擁有良好的溝通、表達(dá)能力,工作認(rèn)真負(fù)責(zé),學(xué)習(xí)能力強(qiáng),執(zhí)行力強(qiáng),樂于接受挑戰(zhàn)并具備較好的承壓能力;
第7篇 大數(shù)據(jù)開發(fā)工程師(渠道團(tuán)隊(duì))職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1.參與產(chǎn)品和項(xiàng)目研發(fā)工作,基于spark完成產(chǎn)品大數(shù)據(jù)架構(gòu)和功能開發(fā);
2.搭建和調(diào)優(yōu)大數(shù)據(jù)基礎(chǔ)平臺(tái),包括hadoop/hbase/hive/sqoop/kafka/flume/spark/storm等大數(shù)據(jù)組件的環(huán)境搭建;
3.維護(hù)線上系統(tǒng)的穩(wěn)定性、可靠性,通過分析現(xiàn)象快速定位問題,進(jìn)而提出優(yōu)化方案,改進(jìn)要求;
任職要求:
1.計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷,5年以上大數(shù)據(jù)工作經(jīng)驗(yàn),有扎實(shí)的計(jì)算機(jī)理論基礎(chǔ);
2.熟練使用mapreduce、spark提供的api編程,具備海量數(shù)據(jù)加工處理(etl)相關(guān)經(jīng)驗(yàn);
3.熟練使用大數(shù)據(jù)的工具平臺(tái),熟悉hadoop生態(tài)環(huán)境,對hadoop、spark、storm、hbase、hive等至少一個(gè)項(xiàng)目有著深入了解;
4.掌握數(shù)據(jù)分析的基本流程,具備數(shù)據(jù)采集、清洗、分析等環(huán)節(jié)的實(shí)戰(zhàn)經(jīng)驗(yàn);可以進(jìn)行數(shù)據(jù)產(chǎn)品etl需求的調(diào)研及開發(fā);
5.熟悉etl任務(wù)調(diào)度及管理;
6.熟悉shell命令,進(jìn)行簡單的shell編程;熟悉linu_文本處理命令,vi、awk、sed等命令
7.熟練使用hadoop或其他分布式平臺(tái)的一種,能使用java、python或其他語言編寫mapreduce進(jìn)行大數(shù)據(jù)處理優(yōu)先;
8.有大型金融項(xiàng)目經(jīng)驗(yàn)者優(yōu)先。'
第8篇 后端數(shù)據(jù)開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1. 配合產(chǎn)品經(jīng)理,參與數(shù)據(jù)平臺(tái)發(fā)展各階段產(chǎn)品需求分析和功能設(shè)計(jì);
2. 基于確定的產(chǎn)品功能需求,參與平臺(tái)后端系統(tǒng)架構(gòu)設(shè)計(jì)、接口定義實(shí)現(xiàn)及測試、構(gòu)建部署和運(yùn)維等各階段工作;
3. 根據(jù)產(chǎn)品或技術(shù)實(shí)現(xiàn)發(fā)展需要,按需進(jìn)行一些新技術(shù)的研究,并評估將其引入現(xiàn)有平臺(tái)實(shí)現(xiàn)的可行性。
任職要求:
1. 本科及以上學(xué)歷,至少3年及以上的實(shí)際開發(fā)經(jīng)驗(yàn);
2. 熟練掌握c/c++/python/java/go/javascript其中至少2種及以上程序設(shè)計(jì)語言,并且自認(rèn)為具有良好的編程素養(yǎng);
3. 熟練掌握常用的數(shù)據(jù)結(jié)構(gòu)及算法;
4. 熟悉linu_系統(tǒng)開發(fā),熟悉網(wǎng)絡(luò)編程、文件系統(tǒng),有分布式系統(tǒng)開發(fā)經(jīng)驗(yàn);
5. 應(yīng)具有熟練的技術(shù)領(lǐng)域相關(guān)的英文文獻(xiàn)閱讀能力;
6. 有良好的溝通能力和團(tuán)隊(duì)合作能力,能夠自主驅(qū)動(dòng),具備良好的問題定位分析能力。
優(yōu)先考慮:
1. 熟悉containerization和virtual machine平臺(tái)和相關(guān)技術(shù),熟悉docker、kubernetes和kvm等,并具有相關(guān)的實(shí)際運(yùn)用經(jīng)驗(yàn);
2. 熟悉當(dāng)前主流的云計(jì)算平臺(tái),如應(yīng)熟悉aws、azure和阿里云其中至少一種平臺(tái)的iaas,并具有相關(guān)的項(xiàng)目經(jīng)驗(yàn);
3. 有開源項(xiàng)目實(shí)際參與經(jīng)驗(yàn)。
第9篇 大數(shù)據(jù)開發(fā)工程師-偏數(shù)據(jù)模型方向-l80542職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1、參與數(shù)據(jù)需求的溝通和模型設(shè)計(jì);
2、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的數(shù)據(jù)需求開發(fā),包括實(shí)時(shí)和批量處理;
3、負(fù)責(zé)不同數(shù)據(jù)源的接入解析落地的設(shè)計(jì)開發(fā)工作;
4、負(fù)責(zé)數(shù)據(jù)質(zhì)量監(jiān)控,解決數(shù)據(jù)運(yùn)行和質(zhì)量問題。
任職要求:
1、計(jì)算機(jī)本科以上學(xué)歷,至少有3年數(shù)據(jù)開發(fā)經(jīng)驗(yàn);
2、精通java/scala/python,至少有3年以上開發(fā)使用經(jīng)驗(yàn);
3、熟悉spark,hive,flink,jstorm等大數(shù)據(jù)實(shí)時(shí)計(jì)算技術(shù);
4、掌握hive sql,sparksql,es query dsl 等查詢語言;擁有sql性能調(diào)優(yōu)經(jīng)驗(yàn);
5、具有較強(qiáng)的業(yè)務(wù)理解能力,較強(qiáng)的責(zé)任心、團(tuán)隊(duì)合作能力和溝通能力;
6、有過圖數(shù)據(jù)庫開發(fā)或spark mllib開發(fā)經(jīng)驗(yàn)者優(yōu)先考慮。
第10篇 大數(shù)據(jù)開發(fā)工程師(駐場開發(fā))職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
(1)根據(jù)業(yè)務(wù)進(jìn)行數(shù)據(jù)需求的調(diào)研、設(shè)計(jì)、開發(fā)及驗(yàn)證工作,并持續(xù)進(jìn)行數(shù)據(jù)業(yè)務(wù)的優(yōu)化;
(2)負(fù)責(zé)大數(shù)據(jù)整體設(shè)計(jì)和開發(fā)工作,包括數(shù)據(jù)接入、清洗、計(jì)算、校驗(yàn)等數(shù)據(jù)加工流程,并沉淀文檔;
(3)持續(xù)對系統(tǒng)的技術(shù)架構(gòu)進(jìn)行改進(jìn)和優(yōu)化,提升海量數(shù)據(jù)的查詢性能和用戶體驗(yàn)。
(4)此崗位需駐場開發(fā)半年左右(地點(diǎn):新疆)
任職資格:
(1)統(tǒng)招本科或以上學(xué)歷,計(jì)算機(jī)、數(shù)學(xué)等相關(guān)專業(yè),工作至少3年以上;
(2)熟悉java/scala開發(fā),有腳本語言(shell,python)開發(fā)經(jīng)驗(yàn)者優(yōu)先;
(3)至少熟悉一種大數(shù)據(jù)處理?xiàng)<夹g(shù),如hadoop、spark; 熟悉流計(jì)算應(yīng)用開發(fā),如spark streaming, flink;熟練掌握大數(shù)據(jù)生態(tài)各個(gè)工具的原理及使用,如hive, sqoop, kafka等
(4)掌握hbase、redis、elastic search等開源大數(shù)據(jù)存儲(chǔ)技術(shù),并能結(jié)合不同的業(yè)務(wù)場景深入使用;
(5)熟悉storm,spark streaming,flink,beam至少一種
(6)熟悉kafka,redis,es等相關(guān)組件
(7)對解決具有挑戰(zhàn)性的數(shù)據(jù)問題充滿激情,具有良好的分析問題和解決問題的能力,能夠勝任部分?jǐn)?shù)據(jù)分析,挖掘,建模工作。
第11篇 大數(shù)據(jù)開發(fā)工程師(數(shù)倉方向)職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1. 理解業(yè)務(wù)需求,負(fù)責(zé)數(shù)據(jù)倉庫建設(shè)、etl流程的開發(fā)和優(yōu)化工作;
2. 解決業(yè)務(wù)數(shù)據(jù)分析、數(shù)據(jù)報(bào)表、數(shù)據(jù)異常相關(guān)的技術(shù)問題;
3. spark/yarn/hdfs 的性能改進(jìn)、功能擴(kuò)展、故障分析;
任職資格:
1. 計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;
2. 精通java編程語言,并熟悉scala、python、shell等一門以上腳本語言;
3. 熟悉hadoop大數(shù)據(jù)平臺(tái)架構(gòu),熟悉spark/spark sql/yarn開發(fā)調(diào)優(yōu)技術(shù),具有相關(guān)項(xiàng)目經(jīng)驗(yàn)
4. 掌握數(shù)據(jù)倉庫(dw)/olap/商業(yè)智能(bi)/數(shù)據(jù)統(tǒng)計(jì)理論,熟悉oracle/mysql數(shù)據(jù)庫;
5. 思路清晰,具備良好的溝通能力和理解能力,較強(qiáng)的學(xué)習(xí)能力以及快速解決問題的能力;
6. 具有高度的責(zé)任感,工作認(rèn)真、踏實(shí)。
福利待遇:
1、薪酬:有競爭力的薪酬體系,我們不止跟你談理想,錢也必須談一談~
2、交通:無論天涯,免費(fèi)班車直達(dá)公司,驀然回首,地鐵就在公司不遠(yuǎn)處。。。
3、工作時(shí)間:5天7小時(shí)工作制,充足的休息讓你一整天元?dú)鉂M滿!
4、各種福利:五險(xiǎn)一金小case,節(jié)日禮物福利補(bǔ)貼說不完!
5、團(tuán)建活動(dòng):下午茶,團(tuán)隊(duì)活動(dòng),部門聚餐,經(jīng)費(fèi)充足不差錢,大公司就是這么壕!
6、發(fā)展平臺(tái):想要升職加薪走向人生巔峰?上市公司晉升發(fā)展機(jī)會(huì)多多~
第12篇 大數(shù)據(jù)開發(fā)工程師 [數(shù)倉方向]職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、使用etl工具(如sqoop、kettle)進(jìn)行數(shù)據(jù)加工、清洗等流程;
2、根據(jù)業(yè)務(wù)需求,進(jìn)行數(shù)倉日常數(shù)據(jù)分析、數(shù)據(jù)報(bào)表開發(fā);
3、使用hive進(jìn)行數(shù)據(jù)處理,及數(shù)據(jù)模型構(gòu)建;
4、具備良好的分析問題和解決問題的能力;
5、具備較強(qiáng)的溝通能力和邏輯表達(dá)能力,具備良好的團(tuán)隊(duì)合作精神和主動(dòng)溝通意識(shí);
任職要求:
1、計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;
2、熟練使用sql(mysql / oracle);
3、熟練數(shù)據(jù)庫/數(shù)據(jù)倉庫分層設(shè)計(jì)、寬表設(shè)計(jì)、星型模型設(shè)計(jì)等;
4、熟練etl工具、sqoop、kettle、spark等;
5、熟悉hadoop、hive、hdfs等常用大數(shù)據(jù)組件;
6、有互聯(lián)網(wǎng)業(yè)務(wù)分布式數(shù)據(jù)倉庫、cube、大數(shù)據(jù)數(shù)據(jù)分析等相關(guān)經(jīng)驗(yàn)者加分;
第13篇 大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、根據(jù)業(yè)務(wù)需求進(jìn)行數(shù)據(jù)模型的調(diào)研、設(shè)計(jì)、開發(fā)及驗(yàn)證工作,并持續(xù)進(jìn)行模型的優(yōu)化;
2、負(fù)責(zé)數(shù)據(jù)模型架構(gòu)的構(gòu)建,建立數(shù)據(jù)抽取、清洗、校驗(yàn)等數(shù)據(jù)加工流程規(guī)范及olap多維數(shù)據(jù)分析模型;
3、持續(xù)對系統(tǒng)的技術(shù)架構(gòu)進(jìn)行改進(jìn)和優(yōu)化,提升海量數(shù)據(jù)的查詢性能和用戶體驗(yàn)。
任職資格:
1、統(tǒng)招本科或以上學(xué)歷,計(jì)算機(jī)、數(shù)據(jù)挖掘等相關(guān)專業(yè),工作至少3年以上;
2、熟悉java開發(fā),有腳本語言(shell,python)開發(fā)經(jīng)驗(yàn)者優(yōu)先;
3、至少熟悉一種大數(shù)據(jù)處理技術(shù),如hadoop、spark;
4、掌握hbase、redis、elastic search等開源大數(shù)據(jù)存儲(chǔ)技術(shù),并能結(jié)合不同的業(yè)務(wù)場景深入使用;
5、精通sql,精通mysql、oracle、sql server等一種大型數(shù)據(jù)庫,以及數(shù)據(jù)庫的維護(hù)和優(yōu)化。
6、熟悉常用java web開發(fā)框架,如:spring、mybatis等;
7、熟悉多線程編程,并對java自帶線程池有一定研究;
8、對解決具有挑戰(zhàn)性的問題充滿激情,具有良好的分析問題和解決問題的能力。
第14篇 數(shù)據(jù)開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負(fù)責(zé)數(shù)據(jù)收集、清洗和規(guī)約等工作;
2、提供面向業(yè)務(wù)的數(shù)據(jù)服務(wù),完成數(shù)據(jù)指標(biāo)的統(tǒng)計(jì)、多維分析和展現(xiàn);
3、根據(jù)業(yè)務(wù)和產(chǎn)品情況,抽象業(yè)務(wù)邏輯,搭建和開發(fā)大數(shù)據(jù)平臺(tái)。
任職要求:
1、統(tǒng)招本科或以上學(xué)歷;
2、精通sql,有較好的sql性能調(diào)優(yōu)經(jīng)驗(yàn),了解hive/mysql的基本原理和調(diào)優(yōu)策略
3、熟悉常用的數(shù)據(jù)挖掘、分析的工具和方法,熟悉linu_平臺(tái),精通shell/python/php等腳本語言的一種或多種,編碼基本功扎實(shí) ;
4、精通java開發(fā),熟悉大數(shù)據(jù)處理相關(guān)技術(shù),有hadoop開發(fā)經(jīng)驗(yàn),掌握mapreduce。
第15篇 java大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1. 精通java開發(fā)、熟悉restful和maven,精通主流java web開發(fā)框架spring、spring boot、spring data jpa、logback、mybatis;
2.熟悉對常用關(guān)系型數(shù)據(jù)庫和hdfs、hive,kafka、storm等讀寫操作,性能優(yōu)化;
3. 具備系統(tǒng)架構(gòu)設(shè)計(jì)能力,具備較強(qiáng)的java程序調(diào)優(yōu)能力及數(shù)據(jù)庫設(shè)計(jì)和sql調(diào)優(yōu)能力,具備良好的溝通能力;
4. 熟悉多線程編程、熟悉junit單元測試;