崗位職責(zé)是什么
etl（extract, transform, load）工程師是一個(gè)專(zhuān)門(mén)負(fù)責(zé)數(shù)據(jù)處理和整合的專(zhuān)業(yè)角色。他們從各種數(shù)據(jù)源中抽?。╡xtract）數(shù)據(jù)，對(duì)其進(jìn)行清洗、轉(zhuǎn)換（transform），然后加載（load）到數(shù)據(jù)倉(cāng)庫(kù)或大數(shù)據(jù)平臺(tái)，以支持企業(yè)的數(shù)據(jù)分析和決策制定。
崗位職責(zé)要求
1. 熟練掌握etl工具，如informatica, talend, ssis等，能進(jìn)行高效的數(shù)據(jù)提取和加載。
2. 深入理解數(shù)據(jù)庫(kù)原理，熟悉sql編程，能夠優(yōu)化數(shù)據(jù)提取效率。
3. 具備數(shù)據(jù)清洗和預(yù)處理能力，能處理異常值、缺失值，確保數(shù)據(jù)質(zhì)量。
4. 掌握數(shù)據(jù)建模理論，能設(shè)計(jì)和實(shí)現(xiàn)符合業(yè)務(wù)需求的數(shù)據(jù)架構(gòu)。
5. 具備良好的編程基礎(chǔ)，如python或java，用于編寫(xiě)腳本和自動(dòng)化任務(wù)。
6. 理解業(yè)務(wù)流程，能與業(yè)務(wù)部門(mén)有效溝通，明確數(shù)據(jù)需求。
崗位職責(zé)描述
etl工程師是數(shù)據(jù)工程團(tuán)隊(duì)的核心成員，他們的工作涉及整個(gè)數(shù)據(jù)生命周期管理。他們不僅要確保數(shù)據(jù)的準(zhǔn)確性和完整性，還要保證數(shù)據(jù)的及時(shí)性，以滿足實(shí)時(shí)或近實(shí)時(shí)的數(shù)據(jù)分析需求。通過(guò)構(gòu)建和維護(hù)etl流程，他們將企業(yè)的運(yùn)營(yíng)數(shù)據(jù)轉(zhuǎn)化為有價(jià)值的信息，為管理層提供決策支持。
有哪些內(nèi)容
1. 需求分析：與業(yè)務(wù)團(tuán)隊(duì)協(xié)作，理解并定義數(shù)據(jù)提取、轉(zhuǎn)換和加載的需求。
2. 設(shè)計(jì)etl流程：規(guī)劃數(shù)據(jù)流，設(shè)計(jì)和實(shí)施高效的數(shù)據(jù)轉(zhuǎn)換邏輯。
3. 編寫(xiě)和調(diào)試etl腳本：使用專(zhuān)業(yè)工具或編程語(yǔ)言創(chuàng)建數(shù)據(jù)抽取和轉(zhuǎn)換規(guī)則。
4. 數(shù)據(jù)質(zhì)量監(jiān)控：設(shè)定數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)，實(shí)施數(shù)據(jù)驗(yàn)證，確保數(shù)據(jù)的準(zhǔn)確性。
5. 性能優(yōu)化：持續(xù)監(jiān)控etl性能，調(diào)整和優(yōu)化以提高處理速度和效率。
6. 文檔編寫(xiě)：記錄etl流程，以便于維護(hù)和知識(shí)傳遞。
7. 系統(tǒng)集成：與數(shù)據(jù)庫(kù)管理員、數(shù)據(jù)分析師和業(yè)務(wù)智能團(tuán)隊(duì)協(xié)作，確保數(shù)據(jù)的無(wú)縫集成。
8. 故障排查和修復(fù)：當(dāng)數(shù)據(jù)問(wèn)題發(fā)生時(shí)，迅速定位并解決，防止影響業(yè)務(wù)運(yùn)行。
9. 持續(xù)改進(jìn)：跟蹤新技術(shù)和最佳實(shí)踐，提升etl流程的自動(dòng)化程度和靈活性。
作為etl工程師，他們需要不斷適應(yīng)快速變化的技術(shù)環(huán)境，以滿足企業(yè)日益復(fù)雜的數(shù)據(jù)處理需求，同時(shí)保持對(duì)業(yè)務(wù)目標(biāo)的敏銳洞察，以驅(qū)動(dòng)數(shù)據(jù)驅(qū)動(dòng)的業(yè)務(wù)決策。
etl崗位職責(zé)范文
第1篇 高級(jí)etl開(kāi)發(fā)經(jīng)理職位描述與崗位職責(zé)任職要求
職位描述：
崗位職能：
1. 基于公司數(shù)據(jù)建設(shè)需要，完成數(shù)據(jù)平臺(tái)構(gòu)建、數(shù)據(jù)內(nèi)容開(kāi)發(fā)等工作。包括：數(shù)據(jù)平臺(tái)基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉(cāng)及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開(kāi)發(fā)工作；
2. 充分理解需求文檔，基于此進(jìn)行自測(cè)，交付高質(zhì)量的開(kāi)發(fā)代碼和數(shù)據(jù)內(nèi)容；
3. 工作中對(duì)數(shù)據(jù)平臺(tái)基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動(dòng)深度思考，提升效能并積極建言、促進(jìn)組織和系統(tǒng)發(fā)展；
4. 團(tuán)隊(duì)日常管理，及其他根據(jù)部門(mén)需要安排事宜。
崗位要求：
1. 信息技術(shù)類(lèi)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)量經(jīng)濟(jì)學(xué)類(lèi)專(zhuān)業(yè)，本科，工作年限5年以上；
2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)和精通etl開(kāi)發(fā)經(jīng)驗(yàn) ，掌握3nf，kimball的維度建模設(shè)計(jì)方法，具備海量數(shù)據(jù)加工處理（etl）相關(guān)經(jīng)驗(yàn) ；
3. 掌握至少一種數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)：oracle、teradata、db2、mysql等，精通并靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理 ；
4. 熟悉linu_系統(tǒng)常規(guī)shell處理命令，靈活運(yùn)用shell做的文本處理和系統(tǒng)操作 ；
5. 有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn) ；
6. 熟練掌握一門(mén)或多門(mén)編程語(yǔ)言，并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先，重點(diǎn)考察python、perl、java ；
7. 熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和技能者優(yōu)先，包括但不局限于：數(shù)據(jù)開(kāi)發(fā)測(cè)試工具與方法、數(shù)據(jù)質(zhì)量等；
8. 良好的語(yǔ)言溝通與表達(dá)能力和自我驅(qū)動(dòng)動(dòng)力。
注：此崗位需在杭州一個(gè)月
第2篇 etl數(shù)據(jù)工程師職位描述與崗位職責(zé)任職要求
職位描述：
職責(zé)：
1. 按業(yè)務(wù)分析需求進(jìn)行建模；
2. 進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)需求分析、方案設(shè)計(jì)、etl裝載過(guò)程設(shè)計(jì)；
3. 從業(yè)務(wù)數(shù)據(jù)庫(kù)到數(shù)據(jù)倉(cāng)庫(kù)的etl開(kāi)發(fā)；
4. 結(jié)合業(yè)務(wù)流程和需求進(jìn)行數(shù)據(jù)分析；
任職資格：
1. 本科以上學(xué)歷，計(jì)算機(jī)等信息技術(shù)相關(guān)專(zhuān)業(yè)；
2. 有互聯(lián)網(wǎng)金融相關(guān)工作經(jīng)驗(yàn)，了解相關(guān)數(shù)據(jù)流和業(yè)務(wù)背景優(yōu)先；
3. 兩年及以上數(shù)據(jù)倉(cāng)庫(kù)相關(guān)工作經(jīng)驗(yàn)，對(duì)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)架構(gòu)具有良好的認(rèn)識(shí)，熟悉數(shù)據(jù)倉(cāng)庫(kù)相關(guān)技術(shù)，如 etl、報(bào)表開(kāi)發(fā)，具備數(shù)據(jù)分析技術(shù)并具有相關(guān)項(xiàng)目經(jīng)驗(yàn)；
4. 具有hive、spark、mysql、oracle等至少一種大型數(shù)據(jù)庫(kù)的應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉數(shù)據(jù)標(biāo)準(zhǔn)管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理；
5. 具備python統(tǒng)計(jì)和數(shù)據(jù)挖掘相關(guān)基本開(kāi)發(fā)能力；
6. 溝通能力好，善于規(guī)劃和總結(jié)，注重團(tuán)隊(duì)合作及知識(shí)共享，能承擔(dān)一定的工作壓力；
第3篇 etl數(shù)據(jù)分析崗位職責(zé)
bi數(shù)據(jù)分析-數(shù)據(jù)開(kāi)發(fā)(etl工程師) 阿里健康 阿里健康科技(中國(guó))有限公司,阿里健康,阿里健康科技(北京)有限公司,阿里 數(shù)據(jù)開(kāi)發(fā)
1、構(gòu)建全面的、準(zhǔn)確的、能反映服務(wù)業(yè)務(wù)線特征的整體指標(biāo)體系, 并基于業(yè)務(wù)監(jiān)控指標(biāo)體系,及時(shí)發(fā)現(xiàn)與定位業(yè)務(wù)問(wèn)題;
2、根據(jù)日常業(yè)務(wù)及產(chǎn)品團(tuán)隊(duì)的需求,提供業(yè)務(wù)監(jiān)控,業(yè)務(wù)評(píng)估的各項(xiàng)數(shù)據(jù)指標(biāo);
3、根據(jù)業(yè)務(wù)發(fā)展情況,從數(shù)據(jù)中發(fā)現(xiàn)業(yè)務(wù)及產(chǎn)品的問(wèn)題點(diǎn)及機(jī)會(huì)點(diǎn),給業(yè)務(wù)及產(chǎn)品提供相應(yīng)的方向;
4、沉淀分析思路與框架, 提煉數(shù)據(jù)產(chǎn)品需求,與相關(guān)團(tuán)隊(duì)(如技術(shù)開(kāi)發(fā)團(tuán)隊(duì)) 協(xié)作并推動(dòng)數(shù)據(jù)產(chǎn)品的落地;
5、與業(yè)務(wù)協(xié)作(行業(yè)團(tuán)隊(duì))組織數(shù)據(jù)的理念、技能、工具的培訓(xùn)。
崗位描述:
1. 負(fù)責(zé)各條業(yè)務(wù)線數(shù)據(jù)倉(cāng)庫(kù)搭建,場(chǎng)景梳理,數(shù)據(jù)維護(hù);
2. 負(fù)責(zé)公司內(nèi)部跨部門(mén)項(xiàng)目數(shù)據(jù)場(chǎng)景梳理,資源調(diào)配工作;
3. 負(fù)責(zé)從已有的數(shù)據(jù)中挖掘?qū)I(yè)務(wù)目標(biāo)起到推動(dòng)作用的分析結(jié)論。
崗位要求:
1、統(tǒng)計(jì)、數(shù)學(xué)、信息技術(shù)、生物統(tǒng)計(jì)本科以上學(xué)歷,有電商bi工作經(jīng)驗(yàn)優(yōu)先;
2、良好的數(shù)據(jù)敏感度,能從海量數(shù)據(jù)提煉核心結(jié)果,有數(shù)據(jù)分析、挖掘、清洗和建模的經(jīng)驗(yàn);
3、有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn),熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)開(kāi)發(fā)經(jīng)驗(yàn),熟練運(yùn)用sql,能高效的與數(shù)據(jù)技術(shù)團(tuán)隊(duì)進(jìn)行溝通者尤佳;
4、較為豐富的數(shù)據(jù)倉(cāng)庫(kù)及數(shù)據(jù)平臺(tái)的架構(gòu)經(jīng)驗(yàn),精通數(shù)據(jù)倉(cāng)庫(kù)建模及etl設(shè)計(jì)開(kāi)發(fā)。
第4篇 etlhive崗位職責(zé)etlhive職責(zé)任職要求
etlhive崗位職責(zé)
崗位職責(zé):
1、負(fù)責(zé)品牌官方微信、微博、官網(wǎng)的內(nèi)容創(chuàng)作及運(yùn)營(yíng)管理工作，定期輸出運(yùn)營(yíng)分析報(bào)告;
2、負(fù)責(zé)制定清晰的社交媒體運(yùn)營(yíng)策略及目標(biāo)，提升品牌粉絲數(shù)量、活躍度及忠誠(chéng)度;
3、負(fù)責(zé)策劃全年度線上營(yíng)銷(xiāo)活動(dòng)，確?；顒?dòng)的成功開(kāi)展，并對(duì)活動(dòng)數(shù)據(jù)進(jìn)行分析評(píng)估;
4、負(fù)責(zé)拓展維護(hù)各渠道kol資源，與各渠道官媒、kol等開(kāi)展有效互動(dòng);
5、負(fù)責(zé)拓展其他符合品牌調(diào)性的線上推廣渠道(如百度貼吧、知乎、微博、豆瓣、微信公眾號(hào)等);
6、配合線下活動(dòng)事件(品質(zhì)活動(dòng)，高端私享會(huì)等)進(jìn)行線上推廣;
7、協(xié)助品牌官方粉絲社群的搭建及運(yùn)營(yíng)維護(hù)。
任職要求:
1、2年以上新媒體文案策劃經(jīng)驗(yàn)，具備獨(dú)立撰寫(xiě)營(yíng)銷(xiāo)策劃方案、制作熱點(diǎn)話題的能力;
2、市場(chǎng)營(yíng)銷(xiāo)、漢語(yǔ)言文學(xué)、新聞學(xué)等本科學(xué)歷，有粉絲運(yùn)營(yíng)經(jīng)驗(yàn)者優(yōu)先;
3、具備優(yōu)秀的寫(xiě)作功底和文字駕馭能力，文案邏輯清晰，腦洞大，思路廣，感染力強(qiáng);
4、熟練掌握office系列辦公軟件，掌握ps、ai等設(shè)計(jì)軟件者優(yōu)先;海報(bào)設(shè)計(jì)制作，h5制作
有實(shí)操經(jīng)驗(yàn);
5、熱愛(ài)閱讀、有定期寫(xiě)作習(xí)慣;
6、具備較強(qiáng)的溝通能力及執(zhí)行能力，性格開(kāi)朗，具有一定的團(tuán)隊(duì)意識(shí)。
第5篇 etl架構(gòu)師崗位職責(zé)
數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)師/etl工程師 同程藝龍 同程網(wǎng)絡(luò)科技股份有限公司,同程旅游,同程藝龍,同程 位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)采集、處理、存儲(chǔ)以及挖掘分析的架構(gòu)實(shí)現(xiàn),負(fù)責(zé)架構(gòu)設(shè)計(jì)和指導(dǎo)團(tuán)隊(duì)落地;
2、參與數(shù)據(jù)平臺(tái)建設(shè),包括環(huán)境和框架的規(guī)劃搭建以及部分核心編碼工作;設(shè)計(jì)并實(shí)現(xiàn)對(duì)bi分析、數(shù)據(jù)產(chǎn)品開(kāi)發(fā)、算法開(kāi)發(fā)的系統(tǒng)性支持;
3、研究未來(lái)數(shù)據(jù)模型和計(jì)算框架的創(chuàng)新與落地,包括但不限于以下領(lǐng)域:大規(guī)模數(shù)據(jù)實(shí)時(shí)化、研發(fā)模式敏捷化、數(shù)據(jù)計(jì)算框架輕量化、數(shù)據(jù)模型組織方式業(yè)務(wù)化等方面。
職位要求:
1、具備5年以上dw系統(tǒng)建設(shè)經(jīng)驗(yàn);了解數(shù)據(jù)倉(cāng)庫(kù)建設(shè)過(guò)程中的挑戰(zhàn)與問(wèn)題,有實(shí)際架構(gòu)設(shè)計(jì)和數(shù)據(jù)建模經(jīng)驗(yàn),有作為技術(shù)負(fù)責(zé)人系統(tǒng)化解決問(wèn)題的成功案例;
2、有dw/bi架構(gòu)體系中某些領(lǐng)域的專(zhuān)項(xiàng)建設(shè)經(jīng)驗(yàn),包括但不限于:數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理、主數(shù)據(jù)管理、數(shù)據(jù)監(jiān)控、流計(jì)算、分布式計(jì)算、分布式文件系統(tǒng)、分布式存儲(chǔ)、大規(guī)模數(shù)據(jù)實(shí)時(shí)化、跨平臺(tái)資源調(diào)度;
3、熟悉hadoop生態(tài)圈,包括但不限于:hadoop、hive、storm、spark、dremel、kylin等;
4、有海量數(shù)據(jù)建模實(shí)踐經(jīng)驗(yàn)優(yōu)先。
第6篇 數(shù)據(jù)平臺(tái)etl開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述：
工作職能：
1、負(fù)責(zé)海量數(shù)據(jù)的etl處理。
技能要求：
1、熟悉oracle數(shù)據(jù)庫(kù)及sql開(kāi)發(fā)；
2、精通java、shell；
3、掌握hadoop、hive、kafka、elasticsearch、flink或多項(xiàng)大數(shù)據(jù)開(kāi)發(fā)技術(shù)；
4、有flink相關(guān)開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先。
福利待遇：
雙休 五險(xiǎn)一金 法定節(jié)假日 健身房 出國(guó)旅游
免費(fèi)體檢 帶薪年假 年終獎(jiǎng)
第7篇 高級(jí)etl開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述：
工作職責(zé):
1、負(fù)責(zé)數(shù)據(jù)平臺(tái)的etl設(shè)計(jì)開(kāi)發(fā)、工作流調(diào)度設(shè)計(jì)、存儲(chǔ)過(guò)程開(kāi)發(fā)、自定義函數(shù)開(kāi)發(fā)。
2、負(fù)責(zé)各業(yè)務(wù)系統(tǒng)數(shù)據(jù)源業(yè)務(wù)調(diào)研、數(shù)據(jù)調(diào)研、準(zhǔn)確性完整性驗(yàn)證。
3、負(fù)責(zé)項(xiàng)目中與第三方系統(tǒng)基于數(shù)據(jù)庫(kù)的數(shù)據(jù)對(duì)接、數(shù)據(jù)預(yù)處理、數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)導(dǎo)入、數(shù)據(jù)校驗(yàn)相關(guān)開(kāi)發(fā)工作。
4、負(fù)責(zé)數(shù)據(jù)平臺(tái)的etl相關(guān)軟件和工具的研發(fā)和改進(jìn)。
5、負(fù)責(zé)數(shù)據(jù)平臺(tái)日常管理、跑批、維護(hù)、監(jiān)控、處理臨時(shí)數(shù)據(jù)需求。
任職資格:
1、本科計(jì)算機(jī)相關(guān)專(zhuān)業(yè)，5年工作經(jīng)驗(yàn)
2、具備3年或以上etl數(shù)據(jù)處理相關(guān)開(kāi)發(fā)經(jīng)驗(yàn)
3、擁有3年以上sql開(kāi)發(fā)
4、掌握hadoop?hive-hql?基礎(chǔ)技能
第8篇 高級(jí)etl工程師職位描述與崗位職責(zé)任職要求
職位描述：
1、負(fù)責(zé)公司數(shù)據(jù)平臺(tái)項(xiàng)目的etl設(shè)計(jì)、實(shí)現(xiàn)以及優(yōu)化。
2、負(fù)責(zé)etl流程優(yōu)化，關(guān)鍵問(wèn)題解決、團(tuán)隊(duì)技術(shù)與引導(dǎo)和前瞻性技術(shù)研究；
3、參與數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)模型設(shè)計(jì)，進(jìn)行數(shù)據(jù)質(zhì)量監(jiān)測(cè)、校驗(yàn)和提升；
4、使用etl技術(shù)對(duì)醫(yī)院信息系統(tǒng)數(shù)據(jù)進(jìn)行提取、清洗、轉(zhuǎn)換和整合；
崗位要求：
1、至少三年以上etl數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)；計(jì)算機(jī)相關(guān)專(zhuān)業(yè)本科以上學(xué)歷，熟悉數(shù)據(jù)分析與數(shù)據(jù)挖掘理論；
2、熟悉dw實(shí)施方法論和常規(guī)etl構(gòu)架，有整體etl開(kāi)發(fā)經(jīng)驗(yàn)，深刻理解元數(shù)據(jù)管理；
3、熟練掌握oracle、sql server、mysql、postgresql等至少兩種主流數(shù)據(jù)庫(kù)的使用；
4、熟練掌握ssis、kettle、informatica等至少一種etl工具的使用；
5、精通sql、存儲(chǔ)過(guò)程、函數(shù)的使用，具備編寫(xiě)、優(yōu)化復(fù)雜sql的能力；
6、對(duì)數(shù)字，數(shù)據(jù)敏感，具備良好的邏輯思維能力；
7、具備專(zhuān)業(yè)的業(yè)務(wù)研究、分析能力，能夠獨(dú)立開(kāi)展業(yè)務(wù)調(diào)研、數(shù)據(jù)分析、數(shù)據(jù)建模、報(bào)告編寫(xiě)工作；
8、有醫(yī)療衛(wèi)生數(shù)據(jù)平臺(tái)開(kāi)發(fā)、實(shí)施經(jīng)驗(yàn)優(yōu)先；
9、能適應(yīng)長(zhǎng)期出差。
第9篇 高級(jí)/資深etl工程師職位描述與崗位職責(zé)任職要求
職位描述：
崗位職能：
1. 基于公司數(shù)據(jù)建設(shè)需要，完成數(shù)據(jù)平臺(tái)構(gòu)建、數(shù)據(jù)內(nèi)容開(kāi)發(fā)等工作。包括：數(shù)據(jù)平臺(tái)基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉(cāng)及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開(kāi)發(fā)工作；
2. 充分理解需求文檔，基于此進(jìn)行自測(cè)，交付高質(zhì)量的開(kāi)發(fā)代碼和數(shù)據(jù)內(nèi)容；
3. 工作中對(duì)數(shù)據(jù)平臺(tái)基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動(dòng)深度思考，提升效能并積極建言、促進(jìn)組織和系統(tǒng)發(fā)展；
4. 其他根據(jù)部門(mén)需要安排事宜；
崗位要求：
1. 信息技術(shù)類(lèi)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)量經(jīng)濟(jì)學(xué)類(lèi)專(zhuān)業(yè)，研究生及以上學(xué)歷。優(yōu)秀候選人學(xué)歷可以放寬至本科，工作年限5年以上；
2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)和精通etl開(kāi)發(fā)經(jīng)驗(yàn) ，掌握3nf，kimball的維度建模設(shè)計(jì)方法，具備海量數(shù)據(jù)加工處理（etl）相關(guān)經(jīng)驗(yàn) ；
3. 掌握至少一種數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)：oracle、teradata、db2、mysql等，精通并靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理 ；
4. 熟悉linu_系統(tǒng)常規(guī)shell處理命令，靈活運(yùn)用shell做的文本處理和系統(tǒng)操作 ；
5. 有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn)著優(yōu)先，重點(diǎn)考察hdfs、hive（hql)、hbase ；
6. 熟練掌握一門(mén)或多門(mén)編程語(yǔ)言，并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先，重點(diǎn)考察python、perl、java ；
7. 熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和技能者優(yōu)先，包括但不局限于：數(shù)據(jù)開(kāi)發(fā)測(cè)試工具與方法、數(shù)據(jù)質(zhì)量等；
8. 良好的語(yǔ)言溝通與表達(dá)能力和自我驅(qū)動(dòng)動(dòng)力。
第10篇 中級(jí)etl開(kāi)發(fā)職位描述與崗位職責(zé)任職要求
職位描述：
崗位職責(zé)：
1、負(fù)責(zé)項(xiàng)目實(shí)施過(guò)程中所對(duì)接的第三方系統(tǒng)的數(shù)據(jù)處理及質(zhì)量分析，并完成項(xiàng)目實(shí)施過(guò)程中的etl工作；
2、熟練掌握etl設(shè)計(jì)過(guò)程，參與大數(shù)據(jù)平臺(tái)架構(gòu)的設(shè)計(jì)、開(kāi)發(fā)、流程優(yōu)化及解決etl相關(guān)技術(shù)問(wèn)題；
3、與用戶(hù)和項(xiàng)目組進(jìn)行有效溝通，采集項(xiàng)目需求，并提出相應(yīng)的解決方案；
4、負(fù)責(zé)監(jiān)控etl并解決出現(xiàn)的問(wèn)題及性能調(diào)優(yōu)，協(xié)助完成bi數(shù)據(jù)建模；
5、根據(jù)規(guī)范，完成項(xiàng)目相關(guān)設(shè)計(jì)開(kāi)發(fā)文檔的整理與編寫(xiě)；
任職要求：
1、 統(tǒng)招全日制本科及以上學(xué)歷，具備大數(shù)據(jù)處理經(jīng)驗(yàn)尤佳；
2、 熟悉etl工具，具有一定項(xiàng)目經(jīng)驗(yàn)，負(fù)責(zé)監(jiān)控etl并解決出現(xiàn)的問(wèn)題及性能調(diào)優(yōu)；
3、熟悉hive和hadoop；
4、 具備一定的編程能力，熟悉至少一種常用編程語(yǔ)言，java尤佳；
5、 掌握關(guān)系數(shù)據(jù)庫(kù)常見(jiàn)用法，熟悉常見(jiàn)軟件的安裝，參與過(guò)項(xiàng)目的etl工具開(kāi)發(fā)項(xiàng)目的完整分析、設(shè)計(jì)、開(kāi)發(fā)流程者優(yōu)先；
6、 具備較強(qiáng)的自我學(xué)習(xí)能力、有較強(qiáng)分析問(wèn)題的能力、人際溝通能力、團(tuán)隊(duì)協(xié)作能力和工作責(zé)任感；
第11篇 etl/bi工程師職位描述與崗位職責(zé)任職要求
職位描述：
崗位職責(zé)：
1、數(shù)倉(cāng)開(kāi)發(fā)、etl開(kāi)發(fā)；
2、銀行業(yè)數(shù)據(jù)模型的設(shè)計(jì)輔助、mapping和落地等；
3、shell腳本開(kāi)發(fā)維護(hù)；
4、銀行業(yè)務(wù)系統(tǒng)的數(shù)據(jù)調(diào)研和分析；
任職要求：
1、本科及以上學(xué)歷，計(jì)算機(jī)或相關(guān)專(zhuān)業(yè)；
2、2年以上oracle、db2等數(shù)據(jù)庫(kù)開(kāi)發(fā)經(jīng)驗(yàn)，熟悉數(shù)據(jù)庫(kù)體系結(jié)構(gòu)；
3、精通pl/sql編程，精通存儲(chǔ)過(guò)程開(kāi)發(fā)；
4、熟悉linu_操作系統(tǒng)；
5、熟悉etl調(diào)度工具和前端工具；
6、軟件基礎(chǔ)理論知識(shí)扎實(shí)，具備良好的數(shù)據(jù)結(jié)構(gòu)、算法功底，有一定獨(dú)立分析、技術(shù)研究能力；
7、良好的溝通能力、團(tuán)隊(duì)合作精神、樂(lè)于；
8、具備較強(qiáng)的自學(xué)能力，有一點(diǎn)抗壓能力，能夠接受出差性質(zhì)的工作。
如有以下技術(shù)背景優(yōu)先考慮：
1、有銀行業(yè)系統(tǒng)開(kāi)發(fā)經(jīng)驗(yàn)；
2、參與過(guò)數(shù)倉(cāng)項(xiàng)目開(kāi)發(fā)、實(shí)施；
3、有數(shù)據(jù)治理項(xiàng)目經(jīng)驗(yàn)的。
第12篇 etl工程師崗位職責(zé)職位要求
職責(zé)描述：
崗位職責(zé)：
1、根據(jù)概要設(shè)計(jì)，進(jìn)行詳細(xì)設(shè)計(jì)的文檔編寫(xiě)；
2、負(fù)責(zé)etl過(guò)程的設(shè)計(jì)/開(kāi)發(fā)實(shí)施、單元測(cè)試；
3、負(fù)責(zé)項(xiàng)目中etl相關(guān)需求調(diào)研、源數(shù)據(jù)調(diào)研、整體設(shè)計(jì)；
4、負(fù)責(zé)項(xiàng)目中環(huán)境安裝及配置。
5、維護(hù)和升級(jí)現(xiàn)有etl任務(wù)和存儲(chǔ)過(guò)程，快速定位并修復(fù)現(xiàn)有系統(tǒng)缺陷
職位要求：
1、 大專(zhuān)及以上學(xué)歷，計(jì)算機(jī)相關(guān)專(zhuān)業(yè)，3年以上 etl 工作經(jīng)驗(yàn)。
2、 熟悉etl開(kāi)發(fā)流程，有hadoop和etl工作經(jīng)驗(yàn)；有從傳統(tǒng)數(shù)據(jù)庫(kù)抽取數(shù)據(jù)到hive數(shù)據(jù)倉(cāng)庫(kù)經(jīng)驗(yàn)，了解sqoop應(yīng)用原理者優(yōu)先。
3、 熟悉主流數(shù)據(jù)庫(kù)sql server、oracle、db2、mysql等；熟悉開(kāi)源的etl工具。
4、有海量數(shù)據(jù)處理工作經(jīng)驗(yàn)，數(shù)據(jù)分析和挖掘經(jīng)驗(yàn)者優(yōu)先；
5、做過(guò)數(shù)據(jù)倉(cāng)庫(kù)、ods項(xiàng)目，對(duì)數(shù)據(jù)治理、數(shù)據(jù)標(biāo)準(zhǔn)及元數(shù)據(jù)有很好理念及實(shí)施經(jīng)驗(yàn)的優(yōu)先；
6、熟練使用腳本語(yǔ)言：如perl、python、shell等任意一種以上；
7、熟悉linu_系統(tǒng)指令和性能優(yōu)化；
8、善于學(xué)習(xí)新技術(shù)，對(duì)新技術(shù)有較強(qiáng)的接受能力；工作認(rèn)真細(xì)致，愿意于人交流溝通。
9、有大型數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)研發(fā)、設(shè)計(jì)經(jīng)驗(yàn)者優(yōu)先；
10、熟悉 java 語(yǔ)言或 hadoop 技術(shù)者優(yōu)先；
崗位要求：
學(xué)歷要求：大專(zhuān)
語(yǔ)言要求：不限
年齡要求：不限
工作年限：3-4年經(jīng)驗(yàn)
第13篇 etl senior engineer職位描述與崗位職責(zé)任職要求
職位描述：
position responsibility:
1) work closely with the business unit and solution leads to better understand the requirement and ensure delivery quality and timeline
2) develop and maintain etl process based on cloud platform
3) work closely in a global team for incident management， change management and fast trouble shooting with high quality resolution
4) as a senior resource， coach the junior resource in the team with good communication and team working skills
position requirement:
1) senior e_perience in ssis / informatica / datastage or other etl tools
2) e_perience of etl performance tuning， testing and data validation
3) strong sql programming knowledge and .net knowledge
4) e_perience in the understanding of data warehouse processes
5) e_perience in other programming language such as shell is preferred
6) understand big data technologies such as hadoop， spark， hbase， hive is a plus
第14篇 大數(shù)據(jù)開(kāi)發(fā)高級(jí)工程師-etl方向職位描述與崗位職責(zé)任職要求
職位描述：
工作職責(zé):
1、 根據(jù)公司數(shù)據(jù)分析需求進(jìn)行基于hadoop 平臺(tái)的項(xiàng)目開(kāi)發(fā)；
2、 根據(jù)需求進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)，熟練使用kettle工具進(jìn)行etl程序的開(kāi)發(fā)；包括實(shí)時(shí)數(shù)據(jù)加工，計(jì)算，etl，管理， 監(jiān)控等；
3、 負(fù)責(zé)針對(duì)源系統(tǒng)進(jìn)行數(shù)據(jù)抽取、處理、分析等相關(guān)工作，及項(xiàng)目中涉及到的數(shù)據(jù)庫(kù)創(chuàng)建、維護(hù)及提供數(shù)據(jù)接口工作；
4、 負(fù)責(zé)設(shè)計(jì)并優(yōu)化基于hive 的數(shù)據(jù)倉(cāng)庫(kù)的建設(shè)；
5、 制定數(shù)據(jù)庫(kù)備份和恢復(fù)策略及工作流程與規(guī)范。
6、能出具消費(fèi)品品牌制造行業(yè)應(yīng)用的數(shù)據(jù)分析技術(shù)解決方案，并落地。
任職資格:
1．從事數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域至少2年以上，熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)與etl開(kāi)發(fā)經(jīng)驗(yàn) ，具備海量數(shù)據(jù)加工處理相關(guān)經(jīng)驗(yàn)；
2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和技能者優(yōu)先，包括但不局限于：元數(shù)據(jù)管理、數(shù)據(jù)開(kāi)發(fā)測(cè)試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理；
3．有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn)著優(yōu)先，重點(diǎn)考察hive、hdfs、hbase;
4. 熟練掌握kettlesqoop、data_、airflow等;
5. 有消費(fèi)品品牌制造、零售行業(yè)經(jīng)驗(yàn)，尤其快消品行業(yè)和財(cái)務(wù)領(lǐng)域數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)者優(yōu)先;
6. 熟悉分布式計(jì)算presto/imapa優(yōu)先;
7．有實(shí)時(shí)計(jì)算方面的經(jīng)驗(yàn)的優(yōu)先。
第15篇 etl高級(jí)工程師崗位職責(zé)及相關(guān)職位要求
etl高級(jí)工程師職位要求
1、計(jì)算機(jī)、數(shù)學(xué)或統(tǒng)計(jì)等專(zhuān)業(yè)，本科以上學(xué)歷；
2、精通sql語(yǔ)言；熟悉數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)、建模；
3、精通python，能夠編寫(xiě)腳本處理、分析數(shù)據(jù)；
4、熟悉批量離線式分布式并行計(jì)算技術(shù)（如hadoop、mapreduce、hive、spark等）
5、熟悉sqlserver、mysql數(shù)據(jù)庫(kù)；了解redis等非關(guān)系型數(shù)據(jù)庫(kù)；
6、熟悉至少一種常用etl工具（如kettle、ssis、gobblin）；了解常用報(bào)表工具（如reporting services以及各類(lèi)開(kāi)源報(bào)表）；
7、了解常用數(shù)據(jù)挖掘方法（回歸、決策樹(shù)、聚類(lèi)等）。
etl高級(jí)工程師崗位職責(zé)
1、負(fù)責(zé)國(guó)際網(wǎng)站后臺(tái)數(shù)據(jù)倉(cāng)庫(kù)搭建、維護(hù)；
2、運(yùn)用各類(lèi)大數(shù)據(jù)工具設(shè)計(jì)etl流程，消費(fèi)生產(chǎn)環(huán)境埋點(diǎn)、日志等數(shù)據(jù)；
3、日常數(shù)據(jù)監(jiān)控以及數(shù)據(jù)預(yù)警，異常數(shù)據(jù)解讀挖掘，并與業(yè)務(wù)同事溝通解決方案；
4、分析用戶(hù)的特征和行為數(shù)據(jù)，挖掘不同類(lèi)型用戶(hù)的行為特性，為實(shí)際的業(yè)務(wù)運(yùn)營(yíng)提供數(shù)據(jù)支持；
5、從數(shù)據(jù)分析結(jié)果中尋找insight和商業(yè)價(jià)值，并以簡(jiǎn)明扼要的形式傳導(dǎo)到其他部分，指導(dǎo)實(shí)際的業(yè)務(wù)運(yùn)營(yíng)；
6、處理國(guó)際網(wǎng)站的臨時(shí)數(shù)據(jù)需求，并對(duì)于常用重要需求轉(zhuǎn)化成數(shù)據(jù)產(chǎn)品。
第16篇 數(shù)據(jù)倉(cāng)庫(kù)/etl/bi工程師職位描述與崗位職責(zé)任職要求
職位描述：
職責(zé)描述：
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建模，業(yè)務(wù)數(shù)據(jù)集市建設(shè)開(kāi)發(fā)
2、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問(wèn)題、etl流程監(jiān)控，保障數(shù)據(jù)平臺(tái)架構(gòu)穩(wěn)定性
3、建立數(shù)據(jù)分析指標(biāo)體系，不斷完善指標(biāo)體系和分析模型；
4、通過(guò)專(zhuān)項(xiàng)分析，輸出專(zhuān)項(xiàng)分析報(bào)告
5、負(fù)責(zé)數(shù)據(jù)分析相關(guān)需求和數(shù)據(jù)測(cè)試的工作
任職要求：
學(xué)歷要求：
全日制統(tǒng)考類(lèi)本科及以上學(xué)歷，計(jì)算機(jī)、通信、電子、軟件工程、統(tǒng)計(jì)學(xué)、應(yīng)用數(shù)學(xué)、數(shù)據(jù)分析等相關(guān)專(zhuān)業(yè)
專(zhuān)業(yè)技能：
1、熟悉數(shù)據(jù)倉(cāng)庫(kù)各類(lèi)模型建模理論，熟悉數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)分層架構(gòu)和多維數(shù)據(jù)模型設(shè)計(jì)；
2、豐富的數(shù)據(jù)分析經(jīng)驗(yàn)，熟練掌握sql、hql、sparksql，擅長(zhǎng)運(yùn)用其分析并完成復(fù)雜業(yè)務(wù)數(shù)據(jù)查詢(xún)
3、掌握至少一種數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)：mysql/oracle/db2等，靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理；
4、熟悉hadoop生態(tài)（如：hdfs/mapreduce/hive/hbase等），并有相關(guān)實(shí)踐經(jīng)驗(yàn)；
5、熟練掌握一門(mén)或多門(mén)編程語(yǔ)言（如：python/shell/java/c++等），并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先；
素質(zhì)：
1、敏銳的數(shù)據(jù)觀察和分析能力，及時(shí)發(fā)現(xiàn)和分析其中隱含的變化和問(wèn)題并給出建議；
2、良好的溝通能力和團(tuán)隊(duì)精神，較強(qiáng)的學(xué)習(xí)能力，能承擔(dān)一定的工作壓力。
經(jīng)驗(yàn)：
至少2年以上數(shù)據(jù)倉(cāng)庫(kù)（離線&實(shí)時(shí)）模型設(shè)計(jì)開(kāi)發(fā)、etl設(shè)計(jì)開(kāi)發(fā)的相關(guān)經(jīng)驗(yàn)，有通信運(yùn)營(yíng)商o域/b域大數(shù)據(jù)、智慧城市大數(shù)據(jù)的數(shù)據(jù)倉(cāng)庫(kù)、etl設(shè)計(jì)研發(fā)經(jīng)驗(yàn)者優(yōu)先
第17篇 etl崗位工作職責(zé)
簡(jiǎn)介:etl,是英文 e_tract-transform-load 的縮寫(xiě),用來(lái)描述將數(shù)據(jù)從來(lái)源端經(jīng)過(guò)抽取(e_tract)、轉(zhuǎn)換(transform)、加載(load)至目的端的過(guò)程。etl一詞較常用在數(shù)據(jù)倉(cāng)庫(kù),但其對(duì)象并不限于數(shù)據(jù)倉(cāng)庫(kù)。
etl職位描述(模板一)
崗位職責(zé):
1、協(xié)助做報(bào)表二次分析,主動(dòng)思考,熱愛(ài)學(xué)習(xí);
2、負(fù)責(zé)報(bào)表開(kāi)發(fā),數(shù)據(jù)中心建設(shè)。
任職要求:
1、精通oracle,sqlserver,mysql等主流數(shù)據(jù)庫(kù);
2、熟悉etl,bi,cognos等數(shù)據(jù)處理工具;
3、有數(shù)據(jù)中心,數(shù)據(jù)倉(cāng)庫(kù)建設(shè)經(jīng)驗(yàn)優(yōu)先;
4、3年以上開(kāi)發(fā)經(jīng)驗(yàn)。etl職位描述(模板二)
崗位職責(zé):
1、根據(jù)公司業(yè)務(wù)需求,構(gòu)建可擴(kuò)展的數(shù)據(jù)倉(cāng)庫(kù),負(fù)責(zé)數(shù)據(jù)模型的規(guī)劃,設(shè)計(jì),實(shí)現(xiàn)和優(yōu)化;
2、負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)的采集,清洗,特征抽取;
3、負(fù)責(zé)etl的維護(hù)工作,發(fā)現(xiàn)故障及時(shí)診斷、定位、分析和調(diào)試,保證數(shù)據(jù)準(zhǔn)確、穩(wěn)定;
4、根據(jù)業(yè)務(wù)需要,提供面向業(yè)務(wù)的報(bào)表、數(shù)據(jù)提取等數(shù)據(jù)服務(wù)。
任職要求:
1、計(jì)算機(jī)相關(guān)專(zhuān)業(yè),本科以上學(xué)歷,2年以上etl工作經(jīng)驗(yàn);
2、精通至少一種主流數(shù)據(jù)庫(kù)的開(kāi)發(fā)和調(diào)優(yōu),可以根據(jù)需求編寫(xiě)復(fù)雜存儲(chǔ)過(guò)程;
3、熟悉python、javascript、shell等至少一種腳本語(yǔ)言;
4、踏實(shí)認(rèn)真細(xì)心,有責(zé)任心和團(tuán)隊(duì)精神。etl職位描述(模板三)
崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)(ods、edw、csl、adm)的設(shè)計(jì)與開(kāi)發(fā)、etl過(guò)程的設(shè)計(jì)與開(kāi)發(fā);
2、負(fù)責(zé)各業(yè)務(wù)系統(tǒng)數(shù)據(jù)源業(yè)務(wù)探查、數(shù)據(jù)探查、id調(diào)研、準(zhǔn)確性完整性驗(yàn)證;
3、為前端展示提供數(shù)據(jù)支持,為業(yè)務(wù)人員提供數(shù)據(jù)查詢(xún);
4、數(shù)據(jù)倉(cāng)庫(kù)日常管理、跑批、維護(hù)、監(jiān)控。
任職要求:
1、3年以上數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目開(kāi)發(fā)經(jīng)驗(yàn),本科以上學(xué)歷;
2、熟悉mysql、oracle等數(shù)據(jù)庫(kù),熟悉kettle、powercenter等etl工具;
3、熟悉inmon企業(yè)數(shù)據(jù)倉(cāng)庫(kù)(edw)設(shè)計(jì)理論與技術(shù)、kimball維度建模理論與技術(shù);
4、了解powerdesigner、erwin等建模工具,熟悉概念模型、邏輯模型、物理模型;
5、熟悉p2p、互聯(lián)網(wǎng)金融業(yè)務(wù)優(yōu)先;
6、熟悉hadoop生態(tài)圈sqoop、hive、hbase優(yōu)先;
7、責(zé)任心強(qiáng)、思路清晰、學(xué)習(xí)力強(qiáng)。etl職位描述(模板四)
崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)的etl的工作;
2、負(fù)責(zé)數(shù)據(jù)分析工具平臺(tái)的設(shè)計(jì)和研發(fā);
3、讓數(shù)據(jù)平臺(tái)為公司的商業(yè)決策提供有效的支持。
任職要求:
1、大學(xué)本科以上學(xué)歷,3年以上工作經(jīng)驗(yàn),計(jì)算機(jī)相關(guān)專(zhuān)業(yè);
2、精通java和hive sql, 有sql性能調(diào)優(yōu)經(jīng)驗(yàn)豐富的尤佳;
3、熟悉大數(shù)據(jù)相關(guān)技術(shù),對(duì)apache hadoop/hive/hbase/sqoop/spark等組件有一定程度的了解;
4、熟悉腳本語(yǔ)言python,perl,shell中的一種或幾種;
5、好的溝通能力、團(tuán)隊(duì)精神和服務(wù)意識(shí);
6、具有強(qiáng)烈的上進(jìn)心和求知欲,優(yōu)秀的自主學(xué)習(xí)能力,自我管理能力。etl職位描述(模板五)
崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)核心結(jié)構(gòu)設(shè)計(jì),及相關(guān)數(shù)據(jù)模塊任務(wù)模塊設(shè)計(jì);
2、負(fù)責(zé)各種業(yè)務(wù)數(shù)據(jù)的etl任務(wù)及數(shù)據(jù)倉(cāng)庫(kù)部署和管理;
3、持續(xù)改進(jìn)優(yōu)化etl、分析處理、數(shù)據(jù)呈現(xiàn)等流程,協(xié)調(diào)海量數(shù)據(jù)壓力問(wèn)題;
4、保證數(shù)據(jù)安全、穩(wěn)定、可恢復(fù);
5、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)的日常維護(hù)工作。
任職要求:
1、計(jì)算機(jī)相關(guān)專(zhuān)業(yè)本科及以上學(xué)歷,三年以上模型設(shè)計(jì)相關(guān)工作經(jīng)驗(yàn),具 有金融/互聯(lián)網(wǎng)行業(yè)任職背景者優(yōu)先;
2、精通常用模型設(shè)計(jì)工具erwin、powerdesigner,熟悉tableau,pentaho 等bi軟件;
3、具有金融業(yè)bi項(xiàng)目模型設(shè)計(jì)或etl開(kāi)發(fā)經(jīng)驗(yàn)邏輯數(shù)據(jù)模型和建模經(jīng)驗(yàn);
4、熟悉掌握java/r/python語(yǔ)言,kettle組件,熟悉mysql、oracle等數(shù)據(jù) 庫(kù),能熟練進(jìn)行sql優(yōu)化;
5、有大數(shù)據(jù)處理經(jīng)驗(yàn),有hadoop/spark sql/mapreduce/hive等相關(guān)數(shù)據(jù) 處理經(jīng)驗(yàn)優(yōu)先;
6、具有良好的邏輯分析能力、語(yǔ)言表達(dá)能力。
第18篇 etl engineer職位描述與崗位職責(zé)任職要求
職位描述：
incorporated in 2017， kpmg technology r&d centre combines four functions: r&d， in-house services， outsourced services and operational services.it is kpmg’s first r&d centre and second delivery centre in china.
as kpmg’s first r&d centre in china， our business activities currently include:
- development， design， production of computer software and computer system integration;
- ai， r&d and delivery of technologies
- big data-related services and technical support， including data development， data processing， data mining etc.
driven by increasing market demand， we will e_pand the r&d centre’s scope of business on an ongoing basis to enable technologies to provide quality services for our clients.
崗位職責(zé)
- 負(fù)責(zé)公司數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)etl開(kāi)發(fā)、維護(hù)、監(jiān)控、優(yōu)化
- 參與數(shù)據(jù)倉(cāng)庫(kù)建模，不斷改進(jìn)現(xiàn)有數(shù)據(jù)倉(cāng)庫(kù)
- 與bi分析師協(xié)同工作，解決數(shù)據(jù)報(bào)表、數(shù)據(jù)異常相關(guān)的技術(shù)問(wèn)題
- 根據(jù)公司要求規(guī)范，編寫(xiě)相應(yīng)的技術(shù)文檔
崗位描述
- 本科或以上學(xué)歷
- 2年以上相關(guān)工作經(jīng)驗(yàn) ，計(jì)算機(jī)或相關(guān)專(zhuān)業(yè)
- 至少熟悉datastage， informatica， odi， kettle中一種工具，有kettle或者odi使用經(jīng)驗(yàn)更佳
- 熟悉oracle ，sql server， my sql等主流數(shù)據(jù)庫(kù)系統(tǒng)
- 有金融行業(yè)工作經(jīng)驗(yàn)者優(yōu)先
第19篇 中級(jí)etl工程師崗位職責(zé)
中級(jí)etl工程師 比孚科技 上海比孚信息科技有限公司,比孚,比孚科技,比孚 職位描述:
1. 負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)/數(shù)據(jù)集市etl設(shè)計(jì)開(kāi)發(fā);
2. 負(fù)責(zé)與業(yè)務(wù)部門(mén)數(shù)據(jù)需求的溝通與確認(rèn);
任職資格:
1. 三以上工作經(jīng)驗(yàn);
2. 熟悉主流etl開(kāi)發(fā)工具,如:ssis 、kettle、datastage等;
3. 熟練掌握主流數(shù)據(jù)庫(kù)的使用,如:sql server、mysql、oracle,對(duì)sql查詢(xún)優(yōu)化有豐富的經(jīng)驗(yàn);
4. 熟悉主流報(bào)表工具,如:tableau、powerbi、cognos;
5. 良好的溝通技能,清晰的邏輯思維能力;
6. 工作認(rèn)真仔細(xì),積極主動(dòng),具備較強(qiáng)的自主學(xué)習(xí)、自我總結(jié)能力。
第20篇 etl數(shù)據(jù)分析崗位職責(zé)任職要求
etl數(shù)據(jù)分析崗位職責(zé)
職責(zé)描述:
1、與數(shù)據(jù)分析師、數(shù)據(jù)開(kāi)發(fā)工程師配合，進(jìn)行數(shù)據(jù)清洗、數(shù)據(jù)準(zhǔn)備;
2、理解數(shù)據(jù)分析及業(yè)務(wù)，設(shè)計(jì)維護(hù)數(shù)據(jù)倉(cāng)庫(kù);
3、與數(shù)據(jù)分析師配合，進(jìn)行數(shù)據(jù);
4、配合數(shù)據(jù)開(kāi)發(fā)工程師，完成模型部署后的業(yè)務(wù)驗(yàn)證、反饋。
任職要求:
1、 大學(xué)本科及以上，計(jì)算機(jī)信息類(lèi)、數(shù)學(xué)/應(yīng)用數(shù)學(xué)類(lèi)等專(zhuān)業(yè)背景;
2、3年以上工作經(jīng)驗(yàn)，具有電力/能源/工業(yè)數(shù)據(jù)分析背景的人員優(yōu)先考慮;
3、熟悉數(shù)據(jù)結(jié)構(gòu)，熟悉數(shù)據(jù)清洗、降維、變量選擇等數(shù)據(jù)準(zhǔn)備過(guò)程，能夠熟練實(shí)現(xiàn)海量數(shù)據(jù)的清洗、準(zhǔn)備;
4、對(duì)回歸、分類(lèi)、聚類(lèi)、關(guān)聯(lián)規(guī)則、時(shí)間序列、神經(jīng)網(wǎng)絡(luò)、決策樹(shù)及其他常用數(shù)據(jù)分析和挖掘技術(shù)有了解，能夠配合數(shù)據(jù)分析師開(kāi)展相關(guān)分析挖掘;
5、能夠熟練使用至少一種主流關(guān)系數(shù)據(jù)庫(kù)及結(jié)構(gòu)化查詢(xún)語(yǔ)言，熟悉hive，并了解spark、hadoop等大數(shù)據(jù)架構(gòu)環(huán)境，能夠進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)建設(shè)與維護(hù);
6、熟練掌握python、r等語(yǔ)言工具中的至少一種，能夠熟練使用相關(guān)的數(shù)據(jù)分析、數(shù)據(jù)處理庫(kù);
7、有l(wèi)inu_使用經(jīng)驗(yàn)，了解shell操作。
