etl工程師崗位職責(zé)16篇

第1篇 數(shù)據(jù)倉(cāng)庫(kù)etl開(kāi)發(fā)工程師崗位職責(zé)

數(shù)據(jù)倉(cāng)庫(kù)etl資深開(kāi)發(fā)工程師 1.5年以上做bi、數(shù)據(jù)倉(cāng)庫(kù)etl開(kāi)發(fā)方向,行業(yè)不限;

2.過(guò)去做北京汽車項(xiàng)目;

3.英語(yǔ)能基本讀寫;

4.開(kāi)發(fā)經(jīng)驗(yàn)豐富,能迅速完成交辦相關(guān)工作;

5.溝通能力良好,具備團(tuán)隊(duì)合作精神,能適應(yīng)一定壓力開(kāi)展工作。 1.5年以上做bi、數(shù)據(jù)倉(cāng)庫(kù)etl開(kāi)發(fā)方向,行業(yè)不限;

2.過(guò)去做北京汽車項(xiàng)目;

3.英語(yǔ)能基本讀寫;

4.開(kāi)發(fā)經(jīng)驗(yàn)豐富,能迅速完成交辦相關(guān)工作;

5.溝通能力良好,具備團(tuán)隊(duì)合作精神,能適應(yīng)一定壓力開(kāi)展工作。

第2篇 中級(jí)etl工程師崗位職責(zé)

中級(jí)etl工程師 比孚科技 上海比孚信息科技有限公司,比孚,比孚科技,比孚 職位描述:

1. 負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)/數(shù)據(jù)集市etl設(shè)計(jì)開(kāi)發(fā);

2. 負(fù)責(zé)與業(yè)務(wù)部門數(shù)據(jù)需求的溝通與確認(rèn);

任職資格:

1. 三以上工作經(jīng)驗(yàn);

2. 熟悉主流etl開(kāi)發(fā)工具,如:ssis 、kettle、datastage等;

3. 熟練掌握主流數(shù)據(jù)庫(kù)的使用,如:sql server、mysql、oracle,對(duì)sql查詢優(yōu)化有豐富的經(jīng)驗(yàn);

4. 熟悉主流報(bào)表工具,如:tableau、powerbi、cognos;

5. 良好的溝通技能,清晰的邏輯思維能力;

6. 工作認(rèn)真仔細(xì),積極主動(dòng),具備較強(qiáng)的自主學(xué)習(xí)、自我總結(jié)能力。

第3篇 dw數(shù)據(jù)倉(cāng)庫(kù)etl工程師職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

1. 負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)需求收集和分析；

2. 負(fù)責(zé)數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計(jì)和開(kāi)發(fā)；

3. 負(fù)責(zé)數(shù)據(jù)抽取、清洗、轉(zhuǎn)化等數(shù)據(jù)處理程序開(kāi)發(fā)；

4. 負(fù)責(zé)對(duì)公司數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)整體架構(gòu)改進(jìn)與流程優(yōu)化；

5. 負(fù)責(zé)bi報(bào)表開(kāi)發(fā)和優(yōu)化。

任職資格：

1. 2年以上數(shù)據(jù)倉(cāng)庫(kù)工作經(jīng)驗(yàn)；

2. 熟悉數(shù)據(jù)庫(kù)、etl、bi建模等工具；

3. 良好編程習(xí)慣，以及較強(qiáng)的學(xué)習(xí)能力和溝通能力。

第4篇 etl工程師崗位職責(zé)職位要求

職責(zé)描述：

崗位職責(zé)：

1、根據(jù)概要設(shè)計(jì)，進(jìn)行詳細(xì)設(shè)計(jì)的文檔編寫；

2、負(fù)責(zé)etl過(guò)程的設(shè)計(jì)/開(kāi)發(fā)實(shí)施、單元測(cè)試；

3、負(fù)責(zé)項(xiàng)目中etl相關(guān)需求調(diào)研、源數(shù)據(jù)調(diào)研、整體設(shè)計(jì)；

4、負(fù)責(zé)項(xiàng)目中環(huán)境安裝及配置。

5、維護(hù)和升級(jí)現(xiàn)有etl任務(wù)和存儲(chǔ)過(guò)程，快速定位并修復(fù)現(xiàn)有系統(tǒng)缺陷

職位要求：

1、 大專及以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)，3年以上 etl 工作經(jīng)驗(yàn)。

2、 熟悉etl開(kāi)發(fā)流程，有hadoop和etl工作經(jīng)驗(yàn)；有從傳統(tǒng)數(shù)據(jù)庫(kù)抽取數(shù)據(jù)到hive數(shù)據(jù)倉(cāng)庫(kù)經(jīng)驗(yàn)，了解sqoop應(yīng)用原理者優(yōu)先。

3、 熟悉主流數(shù)據(jù)庫(kù)sql server、oracle、db2、mysql等；熟悉開(kāi)源的etl工具。

4、有海量數(shù)據(jù)處理工作經(jīng)驗(yàn)，數(shù)據(jù)分析和挖掘經(jīng)驗(yàn)者優(yōu)先；

5、做過(guò)數(shù)據(jù)倉(cāng)庫(kù)、ods項(xiàng)目，對(duì)數(shù)據(jù)治理、數(shù)據(jù)標(biāo)準(zhǔn)及元數(shù)據(jù)有很好理念及實(shí)施經(jīng)驗(yàn)的優(yōu)先；

6、熟練使用腳本語(yǔ)言：如perl、python、shell等任意一種以上；

7、熟悉linu_系統(tǒng)指令和性能優(yōu)化；

8、善于學(xué)習(xí)新技術(shù)，對(duì)新技術(shù)有較強(qiáng)的接受能力；工作認(rèn)真細(xì)致，愿意于人交流溝通。

9、有大型數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)研發(fā)、設(shè)計(jì)經(jīng)驗(yàn)者優(yōu)先；

10、熟悉 java 語(yǔ)言或 hadoop 技術(shù)者優(yōu)先；

崗位要求：

學(xué)歷要求：大專

語(yǔ)言要求：不限

年齡要求：不限

工作年限：3-4年經(jīng)驗(yàn)

第5篇 etl研發(fā)工程師崗位職責(zé)

大數(shù)據(jù)研發(fā)工程師(etl) 永輝云創(chuàng) 永輝云創(chuàng)科技有限公司,永輝云創(chuàng),超級(jí)物種,永輝云創(chuàng) 職責(zé)描述:

1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的設(shè)計(jì)以及開(kāi)發(fā)工作,維護(hù)升級(jí)等等;

2、負(fù)責(zé)離線/實(shí)時(shí)的數(shù)據(jù)存儲(chǔ)和加工處理,保證數(shù)據(jù)質(zhì)量,負(fù)責(zé)數(shù)據(jù)監(jiān)體系的建立和維護(hù);

2、負(fù)責(zé)海量數(shù)據(jù)的清洗、處理和挖掘工作,支持?jǐn)?shù)據(jù)分析師和算法工程師的數(shù)據(jù)需求;

3、對(duì)數(shù)據(jù)敏感,基于海量數(shù)據(jù)進(jìn)行業(yè)務(wù)分析,靈活運(yùn)用可視化工具,參與產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā),分析數(shù)據(jù)成因,發(fā)掘數(shù)據(jù)商業(yè)價(jià)值;

4、研究前沿技術(shù),解決實(shí)際場(chǎng)景中的業(yè)務(wù)問(wèn)題,優(yōu)化離線/實(shí)時(shí)大數(shù)據(jù)計(jì)算任務(wù)的性能。

任職要求:

1、計(jì)算機(jī)或相關(guān)專業(yè)本科及以上學(xué)歷,3年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn);

2、熟悉linu_/uni_開(kāi)發(fā)環(huán)境,精通python/java/scala/shell兩種以上;

3、熟悉常用開(kāi)源分布式系統(tǒng),對(duì)hadoop/hive/spark/storm/flink/hbase/kylin中的一項(xiàng)或多項(xiàng)有深入了解;,能夠獨(dú)立排查及解決分布式系統(tǒng)的問(wèn)題;

4、良好的團(tuán)隊(duì)精神和合作意識(shí),強(qiáng)烈的責(zé)任心,對(duì)工作有激情,良好的溝通能力,能吃苦耐勞;

5、有2年以上的電商領(lǐng)域的優(yōu)先。

第6篇 etl研發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)

1.負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)和優(yōu)化，基于hadoop／hive／odps(ma_couputer)、adb等進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)etl開(kāi)發(fā)和維護(hù)工作；

2.負(fù)責(zé)日常作業(yè)的部署和調(diào)度研發(fā)及維護(hù)工作；

3.負(fù)責(zé)制定數(shù)據(jù)標(biāo)準(zhǔn)制定，數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)，從而有效的進(jìn)行數(shù)據(jù)治理工作。

4.負(fù)責(zé)各類業(yè)務(wù)數(shù)據(jù)的etl任務(wù)及數(shù)據(jù)倉(cāng)庫(kù)部署和管理，持續(xù)改進(jìn)優(yōu)化etl、分析處理、數(shù)據(jù)呈現(xiàn)等流程，協(xié)調(diào)海量數(shù)據(jù)壓力問(wèn)題；

任職資格

1.三年以上數(shù)據(jù)倉(cāng)庫(kù)／etl／數(shù)據(jù)處理相關(guān)開(kāi)發(fā)經(jīng)驗(yàn)；

2.具備mysql、oracle或hive等主流平臺(tái)的數(shù)據(jù)開(kāi)發(fā)及調(diào)優(yōu)經(jīng)驗(yàn)，熟悉python或java優(yōu)先；

3.具備良好的學(xué)習(xí)能力，善于溝通，具備較強(qiáng)的業(yè)務(wù)推動(dòng)能力和執(zhí)行力；

4.熟悉數(shù)據(jù)倉(cāng)庫(kù)體系架構(gòu)、建模理論和模型設(shè)計(jì)思路，能用于項(xiàng)目實(shí)踐；

5.有良好的快速學(xué)習(xí)能力和團(tuán)隊(duì)協(xié)作能力；

6.有java或python項(xiàng)目研發(fā)經(jīng)驗(yàn)者先考慮；

7.有產(chǎn)品意識(shí)，善于溝通，積極主動(dòng)，能夠以目標(biāo)為導(dǎo)向理解工作中相關(guān)任務(wù)的處理優(yōu)先級(jí)關(guān)系。

第7篇 etl數(shù)據(jù)工程師職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)：

1. 按業(yè)務(wù)分析需求進(jìn)行建模；

2. 進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)需求分析、方案設(shè)計(jì)、etl裝載過(guò)程設(shè)計(jì)；

3. 從業(yè)務(wù)數(shù)據(jù)庫(kù)到數(shù)據(jù)倉(cāng)庫(kù)的etl開(kāi)發(fā)；

4. 結(jié)合業(yè)務(wù)流程和需求進(jìn)行數(shù)據(jù)分析；

任職資格：

1. 本科以上學(xué)歷，計(jì)算機(jī)等信息技術(shù)相關(guān)專業(yè)；

2. 有互聯(lián)網(wǎng)金融相關(guān)工作經(jīng)驗(yàn)，了解相關(guān)數(shù)據(jù)流和業(yè)務(wù)背景優(yōu)先；

3. 兩年及以上數(shù)據(jù)倉(cāng)庫(kù)相關(guān)工作經(jīng)驗(yàn)，對(duì)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)架構(gòu)具有良好的認(rèn)識(shí)，熟悉數(shù)據(jù)倉(cāng)庫(kù)相關(guān)技術(shù)，如 etl、報(bào)表開(kāi)發(fā)，具備數(shù)據(jù)分析技術(shù)并具有相關(guān)項(xiàng)目經(jīng)驗(yàn)；

4. 具有hive、spark、mysql、oracle等至少一種大型數(shù)據(jù)庫(kù)的應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉數(shù)據(jù)標(biāo)準(zhǔn)管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理；

5. 具備python統(tǒng)計(jì)和數(shù)據(jù)挖掘相關(guān)基本開(kāi)發(fā)能力；

6. 溝通能力好，善于規(guī)劃和總結(jié)，注重團(tuán)隊(duì)合作及知識(shí)共享，能承擔(dān)一定的工作壓力；

第8篇 etl/bi工程師職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1、數(shù)倉(cāng)開(kāi)發(fā)、etl開(kāi)發(fā)；

2、銀行業(yè)數(shù)據(jù)模型的設(shè)計(jì)輔助、mapping和落地等；

3、shell腳本開(kāi)發(fā)維護(hù)；

4、銀行業(yè)務(wù)系統(tǒng)的數(shù)據(jù)調(diào)研和分析；

任職要求：

1、本科及以上學(xué)歷，計(jì)算機(jī)或相關(guān)專業(yè)；

2、2年以上oracle、db2等數(shù)據(jù)庫(kù)開(kāi)發(fā)經(jīng)驗(yàn)，熟悉數(shù)據(jù)庫(kù)體系結(jié)構(gòu)；

3、精通pl/sql編程，精通存儲(chǔ)過(guò)程開(kāi)發(fā)；

4、熟悉linu_操作系統(tǒng)；

5、熟悉etl調(diào)度工具和前端工具；

6、軟件基礎(chǔ)理論知識(shí)扎實(shí)，具備良好的數(shù)據(jù)結(jié)構(gòu)、算法功底，有一定獨(dú)立分析、技術(shù)研究能力；

7、良好的溝通能力、團(tuán)隊(duì)合作精神、樂(lè)于；

8、具備較強(qiáng)的自學(xué)能力，有一點(diǎn)抗壓能力，能夠接受出差性質(zhì)的工作。

如有以下技術(shù)背景優(yōu)先考慮：

1、有銀行業(yè)系統(tǒng)開(kāi)發(fā)經(jīng)驗(yàn)；

2、參與過(guò)數(shù)倉(cāng)項(xiàng)目開(kāi)發(fā)、實(shí)施；

3、有數(shù)據(jù)治理項(xiàng)目經(jīng)驗(yàn)的。

第9篇 數(shù)據(jù)倉(cāng)庫(kù)/etl/bi工程師職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建模，業(yè)務(wù)數(shù)據(jù)集市建設(shè)開(kāi)發(fā)

2、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問(wèn)題、etl流程監(jiān)控，保障數(shù)據(jù)平臺(tái)架構(gòu)穩(wěn)定性

3、建立數(shù)據(jù)分析指標(biāo)體系，不斷完善指標(biāo)體系和分析模型；

4、通過(guò)專項(xiàng)分析，輸出專項(xiàng)分析報(bào)告

5、負(fù)責(zé)數(shù)據(jù)分析相關(guān)需求和數(shù)據(jù)測(cè)試的工作

任職要求：

學(xué)歷要求：

全日制統(tǒng)考類本科及以上學(xué)歷，計(jì)算機(jī)、通信、電子、軟件工程、統(tǒng)計(jì)學(xué)、應(yīng)用數(shù)學(xué)、數(shù)據(jù)分析等相關(guān)專業(yè)

專業(yè)技能：

1、熟悉數(shù)據(jù)倉(cāng)庫(kù)各類模型建模理論，熟悉數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)分層架構(gòu)和多維數(shù)據(jù)模型設(shè)計(jì)；

2、豐富的數(shù)據(jù)分析經(jīng)驗(yàn)，熟練掌握sql、hql、sparksql，擅長(zhǎng)運(yùn)用其分析并完成復(fù)雜業(yè)務(wù)數(shù)據(jù)查詢

3、掌握至少一種數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)：mysql/oracle/db2等，靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理；

4、熟悉hadoop生態(tài)（如：hdfs/mapreduce/hive/hbase等），并有相關(guān)實(shí)踐經(jīng)驗(yàn)；

5、熟練掌握一門或多門編程語(yǔ)言（如：python/shell/java/c++等），并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先；

素質(zhì)：

1、敏銳的數(shù)據(jù)觀察和分析能力，及時(shí)發(fā)現(xiàn)和分析其中隱含的變化和問(wèn)題并給出建議；

2、良好的溝通能力和團(tuán)隊(duì)精神，較強(qiáng)的學(xué)習(xí)能力，能承擔(dān)一定的工作壓力。

經(jīng)驗(yàn)：

至少2年以上數(shù)據(jù)倉(cāng)庫(kù)（離線&實(shí)時(shí)）模型設(shè)計(jì)開(kāi)發(fā)、etl設(shè)計(jì)開(kāi)發(fā)的相關(guān)經(jīng)驗(yàn)，有通信運(yùn)營(yíng)商o域/b域大數(shù)據(jù)、智慧城市大數(shù)據(jù)的數(shù)據(jù)倉(cāng)庫(kù)、etl設(shè)計(jì)研發(fā)經(jīng)驗(yàn)者優(yōu)先'

第10篇 大數(shù)據(jù)開(kāi)發(fā)高級(jí)工程師-etl方向職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé):

1、 根據(jù)公司數(shù)據(jù)分析需求進(jìn)行基于hadoop 平臺(tái)的項(xiàng)目開(kāi)發(fā)；

2、 根據(jù)需求進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)，熟練使用kettle工具進(jìn)行etl程序的開(kāi)發(fā)；包括實(shí)時(shí)數(shù)據(jù)加工，計(jì)算，etl，管理， 監(jiān)控等；

3、 負(fù)責(zé)針對(duì)源系統(tǒng)進(jìn)行數(shù)據(jù)抽取、處理、分析等相關(guān)工作，及項(xiàng)目中涉及到的數(shù)據(jù)庫(kù)創(chuàng)建、維護(hù)及提供數(shù)據(jù)接口工作；

4、 負(fù)責(zé)設(shè)計(jì)并優(yōu)化基于hive 的數(shù)據(jù)倉(cāng)庫(kù)的建設(shè)；

5、 制定數(shù)據(jù)庫(kù)備份和恢復(fù)策略及工作流程與規(guī)范。

6、能出具消費(fèi)品品牌制造行業(yè)應(yīng)用的數(shù)據(jù)分析技術(shù)解決方案，并落地。

任職資格:

1．從事數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域至少2年以上，熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)與etl開(kāi)發(fā)經(jīng)驗(yàn) ，具備海量數(shù)據(jù)加工處理相關(guān)經(jīng)驗(yàn)；

2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和技能者優(yōu)先，包括但不局限于：元數(shù)據(jù)管理、數(shù)據(jù)開(kāi)發(fā)測(cè)試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理；

3．有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn)著優(yōu)先，重點(diǎn)考察hive、hdfs、hbase;

4. 熟練掌握kettlesqoop、data_、airflow等;

5. 有消費(fèi)品品牌制造、零售行業(yè)經(jīng)驗(yàn)，尤其快消品行業(yè)和財(cái)務(wù)領(lǐng)域數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)者優(yōu)先;

6. 熟悉分布式計(jì)算presto/imapa優(yōu)先;

7．有實(shí)時(shí)計(jì)算方面的經(jīng)驗(yàn)的優(yōu)先。

第11篇 etl高級(jí)工程師崗位職責(zé)及相關(guān)職位要求

etl高級(jí)工程師職位要求

1、計(jì)算機(jī)、數(shù)學(xué)或統(tǒng)計(jì)等專業(yè)，本科以上學(xué)歷；

2、精通sql語(yǔ)言；熟悉數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)、建模；

3、精通python，能夠編寫腳本處理、分析數(shù)據(jù)；

4、熟悉批量離線式分布式并行計(jì)算技術(shù)（如hadoop、mapreduce、hive、spark等）

5、熟悉sqlserver、mysql數(shù)據(jù)庫(kù)；了解redis等非關(guān)系型數(shù)據(jù)庫(kù)；

6、熟悉至少一種常用etl工具（如kettle、ssis、gobblin）；了解常用報(bào)表工具（如reporting services以及各類開(kāi)源報(bào)表）；

7、了解常用數(shù)據(jù)挖掘方法（回歸、決策樹、聚類等）。

etl高級(jí)工程師崗位職責(zé)

1、負(fù)責(zé)國(guó)際網(wǎng)站后臺(tái)數(shù)據(jù)倉(cāng)庫(kù)搭建、維護(hù)；

2、運(yùn)用各類大數(shù)據(jù)工具設(shè)計(jì)etl流程，消費(fèi)生產(chǎn)環(huán)境埋點(diǎn)、日志等數(shù)據(jù)；

3、日常數(shù)據(jù)監(jiān)控以及數(shù)據(jù)預(yù)警，異常數(shù)據(jù)解讀挖掘，并與業(yè)務(wù)同事溝通解決方案；

4、分析用戶的特征和行為數(shù)據(jù)，挖掘不同類型用戶的行為特性，為實(shí)際的業(yè)務(wù)運(yùn)營(yíng)提供數(shù)據(jù)支持；

5、從數(shù)據(jù)分析結(jié)果中尋找insight和商業(yè)價(jià)值，并以簡(jiǎn)明扼要的形式傳導(dǎo)到其他部分，指導(dǎo)實(shí)際的業(yè)務(wù)運(yùn)營(yíng)；

6、處理國(guó)際網(wǎng)站的臨時(shí)數(shù)據(jù)需求，并對(duì)于常用重要需求轉(zhuǎn)化成數(shù)據(jù)產(chǎn)品。

第12篇 高級(jí)/資深etl工程師職位描述與崗位職責(zé)任職要求

職位描述：

崗位職能：

1. 基于公司數(shù)據(jù)建設(shè)需要，完成數(shù)據(jù)平臺(tái)構(gòu)建、數(shù)據(jù)內(nèi)容開(kāi)發(fā)等工作。包括：數(shù)據(jù)平臺(tái)基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉(cāng)及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開(kāi)發(fā)工作；

2. 充分理解需求文檔，基于此進(jìn)行自測(cè)，交付高質(zhì)量的開(kāi)發(fā)代碼和數(shù)據(jù)內(nèi)容；

3. 工作中對(duì)數(shù)據(jù)平臺(tái)基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動(dòng)深度思考，提升效能并積極建言、促進(jìn)組織和系統(tǒng)發(fā)展；

4. 其他根據(jù)部門需要安排事宜；

崗位要求：

1. 信息技術(shù)類、數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)量經(jīng)濟(jì)學(xué)類專業(yè)，研究生及以上學(xué)歷。優(yōu)秀候選人學(xué)歷可以放寬至本科，工作年限5年以上；

2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)和精通etl開(kāi)發(fā)經(jīng)驗(yàn) ，掌握3nf，kimball的維度建模設(shè)計(jì)方法，具備海量數(shù)據(jù)加工處理（etl）相關(guān)經(jīng)驗(yàn) ；

3. 掌握至少一種數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)：oracle、teradata、db2、mysql等，精通并靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理 ；

4. 熟悉linu_系統(tǒng)常規(guī)shell處理命令，靈活運(yùn)用shell做的文本處理和系統(tǒng)操作 ；

5. 有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn)著優(yōu)先，重點(diǎn)考察hdfs、hive（hql)、hbase ；

6. 熟練掌握一門或多門編程語(yǔ)言，并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先，重點(diǎn)考察python、perl、java ；

7. 熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和技能者優(yōu)先，包括但不局限于：數(shù)據(jù)開(kāi)發(fā)測(cè)試工具與方法、數(shù)據(jù)質(zhì)量等；

8. 良好的語(yǔ)言溝通與表達(dá)能力和自我驅(qū)動(dòng)動(dòng)力。

第13篇 etl數(shù)據(jù)工程師崗位職責(zé)

etl數(shù)據(jù)開(kāi)發(fā)工程師 etl數(shù)據(jù)開(kāi)發(fā)工程師

崗位職責(zé):

1、負(fù)責(zé)大數(shù)據(jù)、bi系統(tǒng)相關(guān)模塊的實(shí)施,項(xiàng)目管理工作,包括但不限于需求管理、項(xiàng)目規(guī)劃、過(guò)程實(shí)施、上線驗(yàn)收、交付運(yùn)營(yíng)等;

2、依據(jù)業(yè)務(wù)場(chǎng)景、分析需求提供技術(shù)、業(yè)務(wù)解決方案并加以實(shí)現(xiàn);

3、與技術(shù)部門對(duì)接,解決數(shù)據(jù)建模、報(bào)表和報(bào)告在系統(tǒng)開(kāi)發(fā)遇到的問(wèn)題;

4、協(xié)助項(xiàng)目經(jīng)理進(jìn)行項(xiàng)目交付或協(xié)助商務(wù)開(kāi)展售前支持或poc工作。

任職資格:

1、本科及以上學(xué)歷,計(jì)算機(jī)、統(tǒng)計(jì)學(xué)、應(yīng)用數(shù)學(xué)等相關(guān)專業(yè);

2、熟悉hadoop平臺(tái),2年以上hive、sqoop開(kāi)發(fā)經(jīng)驗(yàn);

3、了解bi系統(tǒng),有數(shù)據(jù)管理經(jīng)驗(yàn),有維度建模相關(guān)經(jīng)驗(yàn);

4、3年以上相關(guān)工作經(jīng)驗(yàn),有銀行或金融數(shù)據(jù)分析經(jīng)驗(yàn)者優(yōu)先;

5、熟悉db2、oracle等數(shù)據(jù)庫(kù)及sql數(shù)據(jù)查詢,熟悉hadoop者優(yōu)先;

6、熟悉linu_開(kāi)發(fā)環(huán)境和shell腳本;

7、具備銀行項(xiàng)目設(shè)計(jì)、開(kāi)發(fā)、優(yōu)化等經(jīng)驗(yàn)者加分;

8、優(yōu)秀的業(yè)務(wù)理解能力、邏輯性和溝通能力,能跨部門合作溝通。

etl數(shù)據(jù)開(kāi)發(fā)工程師

崗位職責(zé):

1、負(fù)責(zé)大數(shù)據(jù)、bi系統(tǒng)相關(guān)模塊的實(shí)施,項(xiàng)目管理工作,包括但不限于需求管理、項(xiàng)目規(guī)劃、過(guò)程實(shí)施、上線驗(yàn)收、交付運(yùn)營(yíng)等;

2、依據(jù)業(yè)務(wù)場(chǎng)景、分析需求提供技術(shù)、業(yè)務(wù)解決方案并加以實(shí)現(xiàn);

3、與技術(shù)部門對(duì)接,解決數(shù)據(jù)建模、報(bào)表和報(bào)告在系統(tǒng)開(kāi)發(fā)遇到的問(wèn)題;

4、協(xié)助項(xiàng)目經(jīng)理進(jìn)行項(xiàng)目交付或協(xié)助商務(wù)開(kāi)展售前支持或poc工作。

任職資格:

1、本科及以上學(xué)歷,計(jì)算機(jī)、統(tǒng)計(jì)學(xué)、應(yīng)用數(shù)學(xué)等相關(guān)專業(yè);

2、熟悉hadoop平臺(tái),2年以上hive、sqoop開(kāi)發(fā)經(jīng)驗(yàn);

3、了解bi系統(tǒng),有數(shù)據(jù)管理經(jīng)驗(yàn),有維度建模相關(guān)經(jīng)驗(yàn);

4、3年以上相關(guān)工作經(jīng)驗(yàn),有銀行或金融數(shù)據(jù)分析經(jīng)驗(yàn)者優(yōu)先;

5、熟悉db2、oracle等數(shù)據(jù)庫(kù)及sql數(shù)據(jù)查詢,熟悉hadoop者優(yōu)先;

6、熟悉linu_開(kāi)發(fā)環(huán)境和shell腳本;

7、具備銀行項(xiàng)目設(shè)計(jì)、開(kāi)發(fā)、優(yōu)化等經(jīng)驗(yàn)者加分;

8、優(yōu)秀的業(yè)務(wù)理解能力、邏輯性和溝通能力,能跨部門合作溝通。

第14篇 etl工程師職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

1、負(fù)責(zé)數(shù)據(jù)分析、加工、清理、處理程序的開(kāi)發(fā)

2、負(fù)責(zé)數(shù)據(jù)相關(guān)平臺(tái)的搭建、開(kāi)發(fā)、維護(hù)、優(yōu)化

3、分布式平臺(tái)應(yīng)用開(kāi)發(fā)（hadoop/spark/hive/hbase）

4、開(kāi)發(fā)數(shù)據(jù)統(tǒng)計(jì)系統(tǒng)，各類統(tǒng)計(jì)程序報(bào)表。

任職要求：

1、2年以上java或python開(kāi)發(fā)工作經(jīng)驗(yàn)，java基礎(chǔ)扎實(shí)；

2、熟悉常見(jiàn)在線與離線大數(shù)據(jù)系統(tǒng)， 如hive， hbase， es， kafka等的工作原理與開(kāi)發(fā)調(diào)優(yōu); 具有mapreduce開(kāi)發(fā)經(jīng)驗(yàn)，有實(shí)際大數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)；

3、熟練掌握oracle、mysql等主流數(shù)據(jù)庫(kù)上的開(kāi)發(fā)；

4、具有良好的溝通能力、組織能力及團(tuán)隊(duì)協(xié)作精神，有較強(qiáng)的分析和解決問(wèn)題的能力.

第15篇 etl工程師（中級(jí)數(shù)據(jù)倉(cāng)庫(kù)工程師）職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

1、 負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建模和etl技術(shù)工作，參與數(shù)據(jù)項(xiàng)目各類數(shù)據(jù)源etl的接口設(shè)計(jì)和文檔、流程規(guī)范；

2、負(fù)責(zé)項(xiàng)目中數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)校驗(yàn)相關(guān)開(kāi)發(fā)工作；

3. 配合使用主流數(shù)據(jù)挖掘工具、etl工具、bi展現(xiàn)的設(shè)計(jì)和開(kāi)發(fā)；

4、 能夠按照公司全面質(zhì)量管理的要求，高質(zhì)量地完成各類技術(shù)支持工作。

任職要求：

1.計(jì)算機(jī)相關(guān)專業(yè)本科以上學(xué)歷，3年以上工作經(jīng)驗(yàn)；

2.熟悉etl開(kāi)發(fā)、數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)流程，熟悉mysql、oracle， ms sql server等主流數(shù)據(jù)庫(kù)，表結(jié)構(gòu)設(shè)計(jì)，存儲(chǔ)過(guò)程編寫；

3.有一定的sql調(diào)優(yōu)知識(shí)和經(jīng)驗(yàn)，具有bi相關(guān)知識(shí)；

4.有hana、hive經(jīng)驗(yàn)優(yōu)先；

5.具備財(cái)務(wù)基礎(chǔ)知識(shí)或者erp基礎(chǔ)知識(shí)者優(yōu)先；

第16篇 etl工程師 - 銀行監(jiān)管報(bào)表職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

overview

we are a leading provider of collateral management and regulatory compliance software solutions to banks and financial institutions on a worldwide basis. we are currently seeking a consultant， to be based in our singapore office to be responsible for providing consultancy to our clients in relation to their regulatory reporting requirements for the monetary authority of singapore.

main role & responsibilities

?be part of the specialist team which provide regulatory subject matter e_pertise to clients

?keep abreast of any regulatory changes advised by the regulator

?support the senior consultant at client workshops to identify data requirements and how they map to the agile reporter data model.

?use etl tool to map and transform client data such as to satisfy the project scope and specification within the timetable set by and agreed with the project manager/senior consultant.

?report to the project manager/senior consultant any delays or e_pected delays to a project， whether due to internal or customer delays， and in particular to highlight any potential scheduling conflicts that could result in such a delay.

?perform product testing as requested by the line manager to be completed within the deadlines set.

任職要求：

?degree level

?2+ years e_perience in etl/bi

?e_perience with rdbms software (e.g. sql server， oracle)

?previous e_perience of the implementation of major regulatory changes is a plus

?basic knowledge of hkma， mas or apra reporting is a plus

languages

?english

?chinese (mandarin)