崗位職責(zé)是什么
etl（extract, transform, load）工程師是一個(gè)專(zhuān)門(mén)負(fù)責(zé)數(shù)據(jù)處理和整合的專(zhuān)業(yè)角色。他們從各種數(shù)據(jù)源中抽取（extract）數(shù)據(jù)，對(duì)其進(jìn)行清洗、轉(zhuǎn)換（transform），然后加載（load）到數(shù)據(jù)倉(cāng)庫(kù)或大數(shù)據(jù)平臺(tái)，以支持企業(yè)的數(shù)據(jù)分析和決策制定。
崗位職責(zé)要求
1. 熟練掌握etl工具，如informatica, talend, ssis等，能進(jìn)行高效的數(shù)據(jù)提取和加載。
2. 深入理解數(shù)據(jù)庫(kù)原理，熟悉sql編程，能夠優(yōu)化數(shù)據(jù)提取效率。
3. 具備數(shù)據(jù)清洗和預(yù)處理能力，能處理異常值、缺失值，確保數(shù)據(jù)質(zhì)量。
4. 掌握數(shù)據(jù)建模理論，能設(shè)計(jì)和實(shí)現(xiàn)符合業(yè)務(wù)需求的數(shù)據(jù)架構(gòu)。
5. 具備良好的編程基礎(chǔ)，如python或java，用于編寫(xiě)腳本和自動(dòng)化任務(wù)。
6. 理解業(yè)務(wù)流程，能與業(yè)務(wù)部門(mén)有效溝通，明確數(shù)據(jù)需求。
崗位職責(zé)描述
etl工程師是數(shù)據(jù)工程團(tuán)隊(duì)的核心成員，他們的工作涉及整個(gè)數(shù)據(jù)生命周期管理。他們不僅要確保數(shù)據(jù)的準(zhǔn)確性和完整性，還要保證數(shù)據(jù)的及時(shí)性，以滿(mǎn)足實(shí)時(shí)或近實(shí)時(shí)的數(shù)據(jù)分析需求。通過(guò)構(gòu)建和維護(hù)etl流程，他們將企業(yè)的運(yùn)營(yíng)數(shù)據(jù)轉(zhuǎn)化為有價(jià)值的信息，為管理層提供決策支持。
有哪些內(nèi)容
1. 需求分析：與業(yè)務(wù)團(tuán)隊(duì)協(xié)作，理解并定義數(shù)據(jù)提取、轉(zhuǎn)換和加載的需求。
2. 設(shè)計(jì)etl流程：規(guī)劃數(shù)據(jù)流，設(shè)計(jì)和實(shí)施高效的數(shù)據(jù)轉(zhuǎn)換邏輯。
3. 編寫(xiě)和調(diào)試etl腳本：使用專(zhuān)業(yè)工具或編程語(yǔ)言創(chuàng)建數(shù)據(jù)抽取和轉(zhuǎn)換規(guī)則。
4. 數(shù)據(jù)質(zhì)量監(jiān)控：設(shè)定數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)，實(shí)施數(shù)據(jù)驗(yàn)證，確保數(shù)據(jù)的準(zhǔn)確性。
5. 性能優(yōu)化：持續(xù)監(jiān)控etl性能，調(diào)整和優(yōu)化以提高處理速度和效率。
6. 文檔編寫(xiě)：記錄etl流程，以便于維護(hù)和知識(shí)傳遞。
7. 系統(tǒng)集成：與數(shù)據(jù)庫(kù)管理員、數(shù)據(jù)分析師和業(yè)務(wù)智能團(tuán)隊(duì)協(xié)作，確保數(shù)據(jù)的無(wú)縫集成。
8. 故障排查和修復(fù)：當(dāng)數(shù)據(jù)問(wèn)題發(fā)生時(shí)，迅速定位并解決，防止影響業(yè)務(wù)運(yùn)行。
9. 持續(xù)改進(jìn)：跟蹤新技術(shù)和最佳實(shí)踐，提升etl流程的自動(dòng)化程度和靈活性。
作為etl工程師，他們需要不斷適應(yīng)快速變化的技術(shù)環(huán)境，以滿(mǎn)足企業(yè)日益復(fù)雜的數(shù)據(jù)處理需求，同時(shí)保持對(duì)業(yè)務(wù)目標(biāo)的敏銳洞察，以驅(qū)動(dòng)數(shù)據(jù)驅(qū)動(dòng)的業(yè)務(wù)決策。
etl崗位職責(zé)范文
第1篇 高級(jí)etl開(kāi)發(fā)經(jīng)理職位描述與崗位職責(zé)任職要求
職位描述：
崗位職能：
1. 基于公司數(shù)據(jù)建設(shè)需要，完成數(shù)據(jù)平臺(tái)構(gòu)建、數(shù)據(jù)內(nèi)容開(kāi)發(fā)等工作。包括：數(shù)據(jù)平臺(tái)基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉(cāng)及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開(kāi)發(fā)工作；
2. 充分理解需求文檔，基于此進(jìn)行自測(cè)，交付高質(zhì)量的開(kāi)發(fā)代碼和數(shù)據(jù)內(nèi)容；
3. 工作中對(duì)數(shù)據(jù)平臺(tái)基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動(dòng)深度思考，提升效能并積極建言、促進(jìn)組織和系統(tǒng)發(fā)展；
4. 團(tuán)隊(duì)日常管理，及其他根據(jù)部門(mén)需要安排事宜。
崗位要求：
1. 信息技術(shù)類(lèi)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)量經(jīng)濟(jì)學(xué)類(lèi)專(zhuān)業(yè)，本科，工作年限5年以上；
2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)和精通etl開(kāi)發(fā)經(jīng)驗(yàn) ，掌握3nf，kimball的維度建模設(shè)計(jì)方法，具備海量數(shù)據(jù)加工處理（etl）相關(guān)經(jīng)驗(yàn) ；
3. 掌握至少一種數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)：oracle、teradata、db2、mysql等，精通并靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理 ；
4. 熟悉linu_系統(tǒng)常規(guī)shell處理命令，靈活運(yùn)用shell做的文本處理和系統(tǒng)操作 ；
5. 有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn) ；
6. 熟練掌握一門(mén)或多門(mén)編程語(yǔ)言，并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先，重點(diǎn)考察python、perl、java ；
7. 熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和技能者優(yōu)先，包括但不局限于：數(shù)據(jù)開(kāi)發(fā)測(cè)試工具與方法、數(shù)據(jù)質(zhì)量等；
8. 良好的語(yǔ)言溝通與表達(dá)能力和自我驅(qū)動(dòng)動(dòng)力。
注：此崗位需在杭州一個(gè)月
第2篇 etl數(shù)據(jù)工程師職位描述與崗位職責(zé)任職要求
職位描述：
職責(zé)：
1. 按業(yè)務(wù)分析需求進(jìn)行建模；
2. 進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)需求分析、方案設(shè)計(jì)、etl裝載過(guò)程設(shè)計(jì)；
3. 從業(yè)務(wù)數(shù)據(jù)庫(kù)到數(shù)據(jù)倉(cāng)庫(kù)的etl開(kāi)發(fā)；
4. 結(jié)合業(yè)務(wù)流程和需求進(jìn)行數(shù)據(jù)分析；
任職資格：
1. 本科以上學(xué)歷，計(jì)算機(jī)等信息技術(shù)相關(guān)專(zhuān)業(yè)；
2. 有互聯(lián)網(wǎng)金融相關(guān)工作經(jīng)驗(yàn)，了解相關(guān)數(shù)據(jù)流和業(yè)務(wù)背景優(yōu)先；
3. 兩年及以上數(shù)據(jù)倉(cāng)庫(kù)相關(guān)工作經(jīng)驗(yàn)，對(duì)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)架構(gòu)具有良好的認(rèn)識(shí)，熟悉數(shù)據(jù)倉(cāng)庫(kù)相關(guān)技術(shù)，如 etl、報(bào)表開(kāi)發(fā)，具備數(shù)據(jù)分析技術(shù)并具有相關(guān)項(xiàng)目經(jīng)驗(yàn)；
4. 具有hive、spark、mysql、oracle等至少一種大型數(shù)據(jù)庫(kù)的應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉數(shù)據(jù)標(biāo)準(zhǔn)管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理；
5. 具備python統(tǒng)計(jì)和數(shù)據(jù)挖掘相關(guān)基本開(kāi)發(fā)能力；
6. 溝通能力好，善于規(guī)劃和總結(jié)，注重團(tuán)隊(duì)合作及知識(shí)共享，能承擔(dān)一定的工作壓力；
第3篇 etl數(shù)據(jù)分析崗位職責(zé)
bi數(shù)據(jù)分析-數(shù)據(jù)開(kāi)發(fā)(etl工程師) 阿里健康 阿里健康科技(中國(guó))有限公司,阿里健康,阿里健康科技(北京)有限公司,阿里 數(shù)據(jù)開(kāi)發(fā)
1、構(gòu)建全面的、準(zhǔn)確的、能反映服務(wù)業(yè)務(wù)線特征的整體指標(biāo)體系, 并基于業(yè)務(wù)監(jiān)控指標(biāo)體系,及時(shí)發(fā)現(xiàn)與定位業(yè)務(wù)問(wèn)題;
2、根據(jù)日常業(yè)務(wù)及產(chǎn)品團(tuán)隊(duì)的需求,提供業(yè)務(wù)監(jiān)控,業(yè)務(wù)評(píng)估的各項(xiàng)數(shù)據(jù)指標(biāo);
3、根據(jù)業(yè)務(wù)發(fā)展情況,從數(shù)據(jù)中發(fā)現(xiàn)業(yè)務(wù)及產(chǎn)品的問(wèn)題點(diǎn)及機(jī)會(huì)點(diǎn),給業(yè)務(wù)及產(chǎn)品提供相應(yīng)的方向;
4、沉淀分析思路與框架, 提煉數(shù)據(jù)產(chǎn)品需求,與相關(guān)團(tuán)隊(duì)(如技術(shù)開(kāi)發(fā)團(tuán)隊(duì)) 協(xié)作并推動(dòng)數(shù)據(jù)產(chǎn)品的落地;
5、與業(yè)務(wù)協(xié)作(行業(yè)團(tuán)隊(duì))組織數(shù)據(jù)的理念、技能、工具的培訓(xùn)。
崗位描述:
1. 負(fù)責(zé)各條業(yè)務(wù)線數(shù)據(jù)倉(cāng)庫(kù)搭建,場(chǎng)景梳理,數(shù)據(jù)維護(hù);
2. 負(fù)責(zé)公司內(nèi)部跨部門(mén)項(xiàng)目數(shù)據(jù)場(chǎng)景梳理,資源調(diào)配工作;
3. 負(fù)責(zé)從已有的數(shù)據(jù)中挖掘?qū)I(yè)務(wù)目標(biāo)起到推動(dòng)作用的分析結(jié)論。
崗位要求:
1、統(tǒng)計(jì)、數(shù)學(xué)、信息技術(shù)、生物統(tǒng)計(jì)本科以上學(xué)歷,有電商bi工作經(jīng)驗(yàn)優(yōu)先;
2、良好的數(shù)據(jù)敏感度,能從海量數(shù)據(jù)提煉核心結(jié)果,有數(shù)據(jù)分析、挖掘、清洗和建模的經(jīng)驗(yàn);
3、有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn),熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)開(kāi)發(fā)經(jīng)驗(yàn),熟練運(yùn)用sql,能高效的與數(shù)據(jù)技術(shù)團(tuán)隊(duì)進(jìn)行溝通者尤佳;
4、較為豐富的數(shù)據(jù)倉(cāng)庫(kù)及數(shù)據(jù)平臺(tái)的架構(gòu)經(jīng)驗(yàn),精通數(shù)據(jù)倉(cāng)庫(kù)建模及etl設(shè)計(jì)開(kāi)發(fā)。
第4篇 etlhive崗位職責(zé)etlhive職責(zé)任職要求
etlhive崗位職責(zé)
崗位職責(zé):
1、負(fù)責(zé)品牌官方微信、微博、官網(wǎng)的內(nèi)容創(chuàng)作及運(yùn)營(yíng)管理工作，定期輸出運(yùn)營(yíng)分析報(bào)告;
2、負(fù)責(zé)制定清晰的社交媒體運(yùn)營(yíng)策略及目標(biāo)，提升品牌粉絲數(shù)量、活躍度及忠誠(chéng)度;
3、負(fù)責(zé)策劃全年度線上營(yíng)銷(xiāo)活動(dòng)，確?；顒?dòng)的成功開(kāi)展，并對(duì)活動(dòng)數(shù)據(jù)進(jìn)行分析評(píng)估;
4、負(fù)責(zé)拓展維護(hù)各渠道kol資源，與各渠道官媒、kol等開(kāi)展有效互動(dòng);
5、負(fù)責(zé)拓展其他符合品牌調(diào)性的線上推廣渠道(如百度貼吧、知乎、微博、豆瓣、微信公眾號(hào)等);
6、配合線下活動(dòng)事件(品質(zhì)活動(dòng)，高端私享會(huì)等)進(jìn)行線上推廣;
7、協(xié)助品牌官方粉絲社群的搭建及運(yùn)營(yíng)維護(hù)。
任職要求:
1、2年以上新媒體文案策劃經(jīng)驗(yàn)，具備獨(dú)立撰寫(xiě)營(yíng)銷(xiāo)策劃方案、制作熱點(diǎn)話題的能力;
2、市場(chǎng)營(yíng)銷(xiāo)、漢語(yǔ)言文學(xué)、新聞學(xué)等本科學(xué)歷，有粉絲運(yùn)營(yíng)經(jīng)驗(yàn)者優(yōu)先;
3、具備優(yōu)秀的寫(xiě)作功底和文字駕馭能力，文案邏輯清晰，腦洞大，思路廣，感染力強(qiáng);
4、熟練掌握office系列辦公軟件，掌握ps、__等設(shè)計(jì)軟件者優(yōu)先;海報(bào)設(shè)計(jì)制作，h5制作
有實(shí)操經(jīng)驗(yàn);
5、熱愛(ài)閱讀、有定期寫(xiě)作習(xí)慣;
6、具備較強(qiáng)的溝通能力及執(zhí)行能力，性格開(kāi)朗，具有一定的團(tuán)隊(duì)意識(shí)。
第5篇 etl架構(gòu)師崗位職責(zé)
數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)師/etl工程師 同程藝龍 同程網(wǎng)絡(luò)科技股份有限公司,同程旅游,同程藝龍,同程 位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)采集、處理、存儲(chǔ)以及挖掘分析的架構(gòu)實(shí)現(xiàn),負(fù)責(zé)架構(gòu)設(shè)計(jì)和指導(dǎo)團(tuán)隊(duì)落地;
2、參與數(shù)據(jù)平臺(tái)建設(shè),包括環(huán)境和框架的規(guī)劃搭建以及部分核心編碼工作;設(shè)計(jì)并實(shí)現(xiàn)對(duì)bi分析、數(shù)據(jù)產(chǎn)品開(kāi)發(fā)、算法開(kāi)發(fā)的系統(tǒng)性支持;
3、研究未來(lái)數(shù)據(jù)模型和計(jì)算框架的創(chuàng)新與落地,包括但不限于以下領(lǐng)域:大規(guī)模數(shù)據(jù)實(shí)時(shí)化、研發(fā)模式敏捷化、數(shù)據(jù)計(jì)算框架輕量化、數(shù)據(jù)模型組織方式業(yè)務(wù)化等方面。
職位要求:
1、具備5年以上dw系統(tǒng)建設(shè)經(jīng)驗(yàn);了解數(shù)據(jù)倉(cāng)庫(kù)建設(shè)過(guò)程中的挑戰(zhàn)與問(wèn)題,有實(shí)際架構(gòu)設(shè)計(jì)和數(shù)據(jù)建模經(jīng)驗(yàn),有作為技術(shù)負(fù)責(zé)人系統(tǒng)化解決問(wèn)題的成功案例;
2、有dw/bi架構(gòu)體系中某些領(lǐng)域的專(zhuān)項(xiàng)建設(shè)經(jīng)驗(yàn),包括但不限于:數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理、主數(shù)據(jù)管理、數(shù)據(jù)監(jiān)控、流計(jì)算、分布式計(jì)算、分布式文件系統(tǒng)、分布式存儲(chǔ)、大規(guī)模數(shù)據(jù)實(shí)時(shí)化、跨平臺(tái)資源調(diào)度;
3、熟悉hadoop生態(tài)圈,包括但不限于:hadoop、hive、storm、spark、dremel、kylin等;
4、有海量數(shù)據(jù)建模實(shí)踐經(jīng)驗(yàn)優(yōu)先。
第6篇 數(shù)據(jù)平臺(tái)etl開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述：
工作職能：
1、負(fù)責(zé)海量數(shù)據(jù)的etl處理。
技能要求：
1、熟悉oracle數(shù)據(jù)庫(kù)及sql開(kāi)發(fā)；
2、精通java、shell；
3、掌握hadoop、hive、kafka、elasticsearch、flink或多項(xiàng)大數(shù)據(jù)開(kāi)發(fā)技術(shù)；
4、有flink相關(guān)開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先。
福利待遇：
雙休 五險(xiǎn)一金 法定節(jié)假日 健身房 出國(guó)旅游
免費(fèi)體檢 帶薪年假 年終獎(jiǎng)
第7篇 高級(jí)etl開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述：
工作職責(zé):
1、負(fù)責(zé)數(shù)據(jù)平臺(tái)的etl設(shè)計(jì)開(kāi)發(fā)、工作流調(diào)度設(shè)計(jì)、存儲(chǔ)過(guò)程開(kāi)發(fā)、自定義函數(shù)開(kāi)發(fā)。
2、負(fù)責(zé)各業(yè)務(wù)系統(tǒng)數(shù)據(jù)源業(yè)務(wù)調(diào)研、數(shù)據(jù)調(diào)研、準(zhǔn)確性完整性驗(yàn)證。
3、負(fù)責(zé)項(xiàng)目中與第三方系統(tǒng)基于數(shù)據(jù)庫(kù)的數(shù)據(jù)對(duì)接、數(shù)據(jù)預(yù)處理、數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)導(dǎo)入、數(shù)據(jù)校驗(yàn)相關(guān)開(kāi)發(fā)工作。
4、負(fù)責(zé)數(shù)據(jù)平臺(tái)的etl相關(guān)軟件和工具的研發(fā)和改進(jìn)。
5、負(fù)責(zé)數(shù)據(jù)平臺(tái)日常管理、跑批、維護(hù)、監(jiān)控、處理臨時(shí)數(shù)據(jù)需求。
任職資格:
1、本科計(jì)算機(jī)相關(guān)專(zhuān)業(yè)，5年工作經(jīng)驗(yàn)
2、具備3年或以上etl數(shù)據(jù)處理相關(guān)開(kāi)發(fā)經(jīng)驗(yàn)
3、擁有3年以上sql開(kāi)發(fā)
4、掌握hadoop?hive-hql?基礎(chǔ)技能
第8篇 高級(jí)etl工程師職位描述與崗位職責(zé)任職要求
職位描述：
1、負(fù)責(zé)公司數(shù)據(jù)平臺(tái)項(xiàng)目的etl設(shè)計(jì)、實(shí)現(xiàn)以及優(yōu)化。
2、負(fù)責(zé)etl流程優(yōu)化，關(guān)鍵問(wèn)題解決、團(tuán)隊(duì)技術(shù)與引導(dǎo)和前瞻性技術(shù)研究；
3、參與數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)模型設(shè)計(jì)，進(jìn)行數(shù)據(jù)質(zhì)量監(jiān)測(cè)、校驗(yàn)和提升；
4、使用etl技術(shù)對(duì)醫(yī)院信息系統(tǒng)數(shù)據(jù)進(jìn)行提取、清洗、轉(zhuǎn)換和整合；
崗位要求：
1、至少三年以上etl數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)；計(jì)算機(jī)相關(guān)專(zhuān)業(yè)本科以上學(xué)歷，熟悉數(shù)據(jù)分析與數(shù)據(jù)挖掘理論；
2、熟悉dw實(shí)施方法論和常規(guī)etl構(gòu)架，有整體etl開(kāi)發(fā)經(jīng)驗(yàn)，深刻理解元數(shù)據(jù)管理；
3、熟練掌握oracle、sql server、mysql、postgresql等至少兩種主流數(shù)據(jù)庫(kù)的使用；
4、熟練掌握ssis、kettle、informatica等至少一種etl工具的使用；
5、精通sql、存儲(chǔ)過(guò)程、函數(shù)的使用，具備編寫(xiě)、優(yōu)化復(fù)雜sql的能力；
6、對(duì)數(shù)字，數(shù)據(jù)敏感，具備良好的邏輯思維能力；
7、具備專(zhuān)業(yè)的業(yè)務(wù)研究、分析能力，能夠獨(dú)立開(kāi)展業(yè)務(wù)調(diào)研、數(shù)據(jù)分析、數(shù)據(jù)建模、報(bào)告編寫(xiě)工作；
8、有醫(yī)療衛(wèi)生數(shù)據(jù)平臺(tái)開(kāi)發(fā)、實(shí)施經(jīng)驗(yàn)優(yōu)先；
9、能適應(yīng)長(zhǎng)期出差。
第9篇 高級(jí)/資深etl工程師職位描述與崗位職責(zé)任職要求
職位描述：
崗位職能：
1. 基于公司數(shù)據(jù)建設(shè)需要，完成數(shù)據(jù)平臺(tái)構(gòu)建、數(shù)據(jù)內(nèi)容開(kāi)發(fā)等工作。包括：數(shù)據(jù)平臺(tái)基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉(cāng)及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開(kāi)發(fā)工作；
2. 充分理解需求文檔，基于此進(jìn)行自測(cè)，交付高質(zhì)量的開(kāi)發(fā)代碼和數(shù)據(jù)內(nèi)容；
3. 工作中對(duì)數(shù)據(jù)平臺(tái)基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動(dòng)深度思考，提升效能并積極建言、促進(jìn)組織和系統(tǒng)發(fā)展；
4. 其他根據(jù)部門(mén)需要安排事宜；
崗位要求：
1. 信息技術(shù)類(lèi)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)量經(jīng)濟(jì)學(xué)類(lèi)專(zhuān)業(yè)，研究生及以上學(xué)歷。優(yōu)秀候選人學(xué)歷可以放寬至本科，工作年限5年以上；
2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)和精通etl開(kāi)發(fā)經(jīng)驗(yàn) ，掌握3nf，kimball的維度建模設(shè)計(jì)方法，具備海量數(shù)據(jù)加工處理（etl）相關(guān)經(jīng)驗(yàn) ；
3. 掌握至少一種數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)：oracle、teradata、db2、mysql等，精通并靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理 ；
4. 熟悉linu_系統(tǒng)常規(guī)shell處理命令，靈活運(yùn)用shell做的文本處理和系統(tǒng)操作 ；
5. 有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn)著優(yōu)先，重點(diǎn)考察hdfs、hive（hql)、hbase ；
6. 熟練掌握一門(mén)或多門(mén)編程語(yǔ)言，并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先，重點(diǎn)考察python、perl、java ；
7. 熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和技能者優(yōu)先，包括但不局限于：數(shù)據(jù)開(kāi)發(fā)測(cè)試工具與方法、數(shù)據(jù)質(zhì)量等；
8. 良好的語(yǔ)言溝通與表達(dá)能力和自我驅(qū)動(dòng)動(dòng)力。
第10篇 中級(jí)etl開(kāi)發(fā)職位描述與崗位職責(zé)任職要求
職位描述：
崗位職責(zé)：
1、負(fù)責(zé)項(xiàng)目實(shí)施過(guò)程中所對(duì)接的第三方系統(tǒng)的數(shù)據(jù)處理及質(zhì)量分析，并完成項(xiàng)目實(shí)施過(guò)程中的etl工作；
2、熟練掌握etl設(shè)計(jì)過(guò)程，參與大數(shù)據(jù)平臺(tái)架構(gòu)的設(shè)計(jì)、開(kāi)發(fā)、流程優(yōu)化及解決etl相關(guān)技術(shù)問(wèn)題；
3、與用戶(hù)和項(xiàng)目組進(jìn)行有效溝通，采集項(xiàng)目需求，并提出相應(yīng)的解決方案；
4、負(fù)責(zé)監(jiān)控etl并解決出現(xiàn)的問(wèn)題及性能調(diào)優(yōu)，協(xié)助完成bi數(shù)據(jù)建模；
5、根據(jù)規(guī)范，完成項(xiàng)目相關(guān)設(shè)計(jì)開(kāi)發(fā)文檔的整理與編寫(xiě)；
任職要求：
1、 統(tǒng)招全日制本科及以上學(xué)歷，具備大數(shù)據(jù)處理經(jīng)驗(yàn)尤佳；
2、 熟悉etl工具，具有一定項(xiàng)目經(jīng)驗(yàn)，負(fù)責(zé)監(jiān)控etl并解決出現(xiàn)的問(wèn)題及性能調(diào)優(yōu)；
3、熟悉hive和hadoop；
4、 具備一定的編程能力，熟悉至少一種常用編程語(yǔ)言，java尤佳；
5、 掌握關(guān)系數(shù)據(jù)庫(kù)常見(jiàn)用法，熟悉常見(jiàn)軟件的安裝，參與過(guò)項(xiàng)目的etl工具開(kāi)發(fā)項(xiàng)目的完整分析、設(shè)計(jì)、開(kāi)發(fā)流程者優(yōu)先；
6、 具備較強(qiáng)的自我學(xué)習(xí)能力、有較強(qiáng)分析問(wèn)題的能力、人際溝通能力、團(tuán)隊(duì)協(xié)作能力和工作責(zé)任感；
第11篇 etl/bi工程師職位描述與崗位職責(zé)任職要求
職位描述：
崗位職責(zé)：
1、數(shù)倉(cāng)開(kāi)發(fā)、etl開(kāi)發(fā)；
2、銀行業(yè)數(shù)據(jù)模型的設(shè)計(jì)輔助、mapping和落地等；
3、shell腳本開(kāi)發(fā)維護(hù)；
4、銀行業(yè)務(wù)系統(tǒng)的數(shù)據(jù)調(diào)研和分析；
任職要求：
1、本科及以上學(xué)歷，計(jì)算機(jī)或相關(guān)專(zhuān)業(yè)；
2、2年以上oracle、db2等數(shù)據(jù)庫(kù)開(kāi)發(fā)經(jīng)驗(yàn)，熟悉數(shù)據(jù)庫(kù)體系結(jié)構(gòu)；
3、精通pl/sql編程，精通存儲(chǔ)過(guò)程開(kāi)發(fā)；
4、熟悉linu_操作系統(tǒng)；
5、熟悉etl調(diào)度工具和前端工具；
6、軟件基礎(chǔ)理論知識(shí)扎實(shí)，具備良好的數(shù)據(jù)結(jié)構(gòu)、算法功底，有一定獨(dú)立分析、技術(shù)研究能力；
7、良好的溝通能力、團(tuán)隊(duì)合作精神、樂(lè)于；
8、具備較強(qiáng)的自學(xué)能力，有一點(diǎn)抗壓能力，能夠接受出差性質(zhì)的工作。
如有以下技術(shù)背景優(yōu)先考慮：
1、有銀行業(yè)系統(tǒng)開(kāi)發(fā)經(jīng)驗(yàn)；
2、參與過(guò)數(shù)倉(cāng)項(xiàng)目開(kāi)發(fā)、實(shí)施；
3、有數(shù)據(jù)治理項(xiàng)目經(jīng)驗(yàn)的。
第12篇 etl工程師崗位職責(zé)職位要求
職責(zé)描述：
崗位職責(zé)：
1、根據(jù)概要設(shè)計(jì)，進(jìn)行詳細(xì)設(shè)計(jì)的文檔編寫(xiě)；
2、負(fù)責(zé)etl過(guò)程的設(shè)計(jì)/開(kāi)發(fā)實(shí)施、單元測(cè)試；
3、負(fù)責(zé)項(xiàng)目中etl相關(guān)需求調(diào)研、源數(shù)據(jù)調(diào)研、整體設(shè)計(jì)；
4、負(fù)責(zé)項(xiàng)目中環(huán)境安裝及配置。
5、維護(hù)和升級(jí)現(xiàn)有etl任務(wù)和存儲(chǔ)過(guò)程，快速定位并修復(fù)現(xiàn)有系統(tǒng)缺陷
職位要求：
1、 大專(zhuān)及以上學(xué)歷，計(jì)算機(jī)相關(guān)專(zhuān)業(yè)，3年以上 etl 工作經(jīng)驗(yàn)。
2、 熟悉etl開(kāi)發(fā)流程，有hadoop和etl工作經(jīng)驗(yàn)；有從傳統(tǒng)數(shù)據(jù)庫(kù)抽取數(shù)據(jù)到hive數(shù)據(jù)倉(cāng)庫(kù)經(jīng)驗(yàn)，了解sqoop應(yīng)用原理者優(yōu)先。
3、 熟悉主流數(shù)據(jù)庫(kù)sql server、oracle、db2、mysql等；熟悉開(kāi)源的etl工具。
4、有海量數(shù)據(jù)處理工作經(jīng)驗(yàn)，數(shù)據(jù)分析和挖掘經(jīng)驗(yàn)者優(yōu)先；
5、做過(guò)數(shù)據(jù)倉(cāng)庫(kù)、ods項(xiàng)目，對(duì)數(shù)據(jù)治理、數(shù)據(jù)標(biāo)準(zhǔn)及元數(shù)據(jù)有很好理念及實(shí)施經(jīng)驗(yàn)的優(yōu)先；
6、熟練使用腳本語(yǔ)言：如perl、python、shell等任意一種以上；
7、熟悉linu_系統(tǒng)指令和性能優(yōu)化；
8、善于學(xué)習(xí)新技術(shù)，對(duì)新技術(shù)有較強(qiáng)的接受能力；工作認(rèn)真細(xì)致，愿意于人交流溝通。
9、有大型數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)研發(fā)、設(shè)計(jì)經(jīng)驗(yàn)者優(yōu)先；
10、熟悉 java 語(yǔ)言或 hadoop 技術(shù)者優(yōu)先；
崗位要求：
學(xué)歷要求：大專(zhuān)
語(yǔ)言要求：不限
年齡要求：不限
工作年限：3-4年經(jīng)驗(yàn)
第13篇 etl senior engineer職位描述與崗位職責(zé)任職要求
職位描述：
position responsibility:
1) work closely with the business unit and solution leads to better understand the requirement and ensure delivery quality and timeline
2) develop and m__nt__n etl process based on cloud platform
3) work closely in a global team for incident management， change management and fast trouble shooting with high quality resolution
4) as a senior resource， coach the junior resource in the team with good communication and team working skills
position requirement:
1) senior e_perience in ssis / informatica / datastage or other etl tools
2) e_perience of etl performance tuning， testing and data validation
3) strong sql programming knowledge and .net knowledge
4) e_perience in the understanding of data warehouse processes
5) e_perience in other programming language such as shell is preferred
6) understand big data technologies such as hadoop， spark， hbase， hive is a plus
第14篇 大數(shù)據(jù)開(kāi)發(fā)高級(jí)工程師-etl方向職位描述與崗位職責(zé)任職要求
職位描述：
工作職責(zé):
1、 根據(jù)公司數(shù)據(jù)分析需求進(jìn)行基于hadoop 平臺(tái)的項(xiàng)目開(kāi)發(fā)；
2、 根據(jù)需求進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)，熟練使用kettle工具進(jìn)行etl程序的開(kāi)發(fā)；包括實(shí)時(shí)數(shù)據(jù)加工，計(jì)算，etl，管理， 監(jiān)控等；
3、 負(fù)責(zé)針對(duì)源系統(tǒng)進(jìn)行數(shù)據(jù)抽取、處理、分析等相關(guān)工作，及項(xiàng)目中涉及到的數(shù)據(jù)庫(kù)創(chuàng)建、維護(hù)及提供數(shù)據(jù)接口工作；
4、 負(fù)責(zé)設(shè)計(jì)并優(yōu)化基于hive 的數(shù)據(jù)倉(cāng)庫(kù)的建設(shè)；
5、 制定數(shù)據(jù)庫(kù)備份和恢復(fù)策略及工作流程與規(guī)范。
6、能出具消費(fèi)品品牌制造行業(yè)應(yīng)用的數(shù)據(jù)分析技術(shù)解決方案，并落地。
任職資格:
1．從事數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域至少2年以上，熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)與etl開(kāi)發(fā)經(jīng)驗(yàn) ，具備海量數(shù)據(jù)加工處理相關(guān)經(jīng)驗(yàn)；
2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和技能者優(yōu)先，包括但不局限于：元數(shù)據(jù)管理、數(shù)據(jù)開(kāi)發(fā)測(cè)試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理；
3．有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)，熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn)著優(yōu)先，重點(diǎn)考察hive、hdfs、hbase;
4. 熟練掌握kettlesqoop、data_、__rflow等;
5. 有消費(fèi)品品牌制造、零售行業(yè)經(jīng)驗(yàn)，尤其快消品行業(yè)和財(cái)務(wù)領(lǐng)域數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)者優(yōu)先;
6. 熟悉分布式計(jì)算presto/imapa優(yōu)先;
7．有實(shí)時(shí)計(jì)算方面的經(jīng)驗(yàn)的優(yōu)先。
第15篇 etl高級(jí)工程師崗位職責(zé)及相關(guān)職位要求
etl高級(jí)工程師職位要求
1、計(jì)算機(jī)、數(shù)學(xué)或統(tǒng)計(jì)等專(zhuān)業(yè)，本科以上學(xué)歷；
2、精通sql語(yǔ)言；熟悉數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)、建模；
3、精通python，能夠編寫(xiě)腳本處理、分析數(shù)據(jù)；
4、熟悉批量離線式分布式并行計(jì)算技術(shù)（如hadoop、mapreduce、hive、spark等）
5、熟悉sqlserver、mysql數(shù)據(jù)庫(kù)；了解redis等非關(guān)系型數(shù)據(jù)庫(kù)；
6、熟悉至少一種常用etl工具（如kettle、ssis、gobblin）；了解常用報(bào)表工具（如reporting services以及各類(lèi)開(kāi)源報(bào)表）；
7、了解常用數(shù)據(jù)挖掘方法（回歸、決策樹(shù)、聚類(lèi)等）。
etl高級(jí)工程師崗位職責(zé)
1、負(fù)責(zé)國(guó)際網(wǎng)站后臺(tái)數(shù)據(jù)倉(cāng)庫(kù)搭建、維護(hù)；
2、運(yùn)用各類(lèi)大數(shù)據(jù)工具設(shè)計(jì)etl流程，消費(fèi)生產(chǎn)環(huán)境埋點(diǎn)、日志等數(shù)據(jù)；
3、日常數(shù)據(jù)監(jiān)控以及數(shù)據(jù)預(yù)警，異常數(shù)據(jù)解讀挖掘，并與業(yè)務(wù)同事溝通解決方案；
4、分析用戶(hù)的特征和行為數(shù)據(jù)，挖掘不同類(lèi)型用戶(hù)的行為特性，為實(shí)際的業(yè)務(wù)運(yùn)營(yíng)提供數(shù)據(jù)支持；
5、從數(shù)據(jù)分析結(jié)果中尋找insight和商業(yè)價(jià)值，并以簡(jiǎn)明扼要的形式傳導(dǎo)到其他部分，指導(dǎo)實(shí)際的業(yè)務(wù)運(yùn)營(yíng)；
6、處理國(guó)際網(wǎng)站的臨時(shí)數(shù)據(jù)需求，并對(duì)于常用重要需求轉(zhuǎn)化成數(shù)據(jù)產(chǎn)品。
第16篇 數(shù)據(jù)倉(cāng)庫(kù)/etl/bi工程師職位描述與崗位職責(zé)任職要求
職位描述：
職責(zé)描述：
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建模，業(yè)務(wù)數(shù)據(jù)集市建設(shè)開(kāi)發(fā)
2、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問(wèn)題、etl流程監(jiān)控，保障數(shù)據(jù)平臺(tái)架構(gòu)穩(wěn)定性
3、建立數(shù)據(jù)分析指標(biāo)體系，不斷完善指標(biāo)體系和分析模型；
4、通過(guò)專(zhuān)項(xiàng)分析，輸出專(zhuān)項(xiàng)分析報(bào)告
5、負(fù)責(zé)數(shù)據(jù)分析相關(guān)需求和數(shù)據(jù)測(cè)試的工作
任職要求：
學(xué)歷要求：
全日制統(tǒng)考類(lèi)本科及以上學(xué)歷，計(jì)算機(jī)、通信、電子、軟件工程、統(tǒng)計(jì)學(xué)、應(yīng)用數(shù)學(xué)、數(shù)據(jù)分析等相關(guān)專(zhuān)業(yè)
專(zhuān)業(yè)技能：
1、熟悉數(shù)據(jù)倉(cāng)庫(kù)各類(lèi)模型建模理論，熟悉數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)分層架構(gòu)和多維數(shù)據(jù)模型設(shè)計(jì)；
2、豐富的數(shù)據(jù)分析經(jīng)驗(yàn)，熟練掌握sql、hql、sparksql，擅長(zhǎng)運(yùn)用其分析并完成復(fù)雜業(yè)務(wù)數(shù)據(jù)查詢(xún)
3、掌握至少一種數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)：mysql/oracle/db2等，靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理；
4、熟悉hadoop生態(tài)（如：hdfs/mapreduce/hive/hbase等），并有相關(guān)實(shí)踐經(jīng)驗(yàn)；
5、熟練掌握一門(mén)或多門(mén)編程語(yǔ)言（如：python/shell/java/c++等），并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先；
素質(zhì)：
1、敏銳的數(shù)據(jù)觀察和分析能力，及時(shí)發(fā)現(xiàn)和分析其中隱含的變化和問(wèn)題并給出建議；
2、良好的溝通能力和團(tuán)隊(duì)精神，較強(qiáng)的學(xué)習(xí)能力，能承擔(dān)一定的工作壓力。
經(jīng)驗(yàn)：
至少2年以上數(shù)據(jù)倉(cāng)庫(kù)（離線&實(shí)時(shí)）模型設(shè)計(jì)開(kāi)發(fā)、etl設(shè)計(jì)開(kāi)發(fā)的相關(guān)經(jīng)驗(yàn)，有通信運(yùn)營(yíng)商o域/b域大數(shù)據(jù)、智慧城市大數(shù)據(jù)的數(shù)據(jù)倉(cāng)庫(kù)、etl設(shè)計(jì)研發(fā)經(jīng)驗(yàn)者優(yōu)先
第17篇 etl崗位工作職責(zé)
簡(jiǎn)介:etl,是英文 e_tract-transform-load 的縮寫(xiě),用來(lái)描述將數(shù)據(jù)從來(lái)源端經(jīng)過(guò)抽取(e_tract)、轉(zhuǎn)換(transform)、加載(load)至目的端的過(guò)程。etl一詞較常用在數(shù)據(jù)倉(cāng)庫(kù),但其對(duì)象并不限于數(shù)據(jù)倉(cāng)庫(kù)。
etl職位描述(模板一)
崗位職責(zé):
1、協(xié)助做報(bào)表二次分析,主動(dòng)思考,熱愛(ài)學(xué)習(xí);
2、負(fù)責(zé)報(bào)表開(kāi)發(fā),數(shù)據(jù)中心建設(shè)。
任職要求:
1、精通oracle,sqlserver,mysql等主流數(shù)據(jù)庫(kù);
2、熟悉etl,bi,cognos等數(shù)據(jù)處理工具;
3、有數(shù)據(jù)中心,數(shù)據(jù)倉(cāng)庫(kù)建設(shè)經(jīng)驗(yàn)優(yōu)先;
4、3年以上開(kāi)發(fā)經(jīng)驗(yàn)。etl職位描述(模板二)
崗位職責(zé):
1、根據(jù)公司業(yè)務(wù)需求,構(gòu)建可擴(kuò)展的數(shù)據(jù)倉(cāng)庫(kù),負(fù)責(zé)數(shù)據(jù)模型的規(guī)劃,設(shè)計(jì),實(shí)現(xiàn)和優(yōu)化;
2、負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)的采集,清洗,特征抽取;
3、負(fù)責(zé)etl的維護(hù)工作,發(fā)現(xiàn)故障及時(shí)診斷、定位、分析和調(diào)試,保證數(shù)據(jù)準(zhǔn)確、穩(wěn)定;
4、根據(jù)業(yè)務(wù)需要,提供面向業(yè)務(wù)的報(bào)表、數(shù)據(jù)提取等數(shù)據(jù)服務(wù)。
任職要求:
1、計(jì)算機(jī)相關(guān)專(zhuān)業(yè),本科以上學(xué)歷,2年以上etl工作經(jīng)驗(yàn);
2、精通至少一種主流數(shù)據(jù)庫(kù)的開(kāi)發(fā)和調(diào)優(yōu),可以根據(jù)需求編寫(xiě)復(fù)雜存儲(chǔ)過(guò)程;
3、熟悉python、javascript、shell等至少一種腳本語(yǔ)言;
4、踏實(shí)認(rèn)真細(xì)心,有責(zé)任心和團(tuán)隊(duì)精神。etl職位描述(模板三)
崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)(ods、edw、csl、adm)的設(shè)計(jì)與開(kāi)發(fā)、etl過(guò)程的設(shè)計(jì)與開(kāi)發(fā);
2、負(fù)責(zé)各業(yè)務(wù)系統(tǒng)數(shù)據(jù)源業(yè)務(wù)探查、數(shù)據(jù)探查、id調(diào)研、準(zhǔn)確性完整性驗(yàn)證;
3、為前端展示提供數(shù)據(jù)支持,為業(yè)務(wù)人員提供數(shù)據(jù)查詢(xún);
4、數(shù)據(jù)倉(cāng)庫(kù)日常管理、跑批、維護(hù)、監(jiān)控。
任職要求:
1、3年以上數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目開(kāi)發(fā)經(jīng)驗(yàn),本科以上學(xué)歷;
2、熟悉mysql、oracle等數(shù)據(jù)庫(kù),熟悉kettle、powercenter等etl工具;
3、熟悉inmon企業(yè)數(shù)據(jù)倉(cāng)庫(kù)(edw)設(shè)計(jì)理論與技術(shù)、kimball維度建模理論與技術(shù);
4、了解powerdesigner、erwin等建模工具,熟悉概念模型、邏輯模型、物理模型;
5、熟悉p2p、互聯(lián)網(wǎng)金融業(yè)務(wù)優(yōu)先;
6、熟悉hadoop生態(tài)圈sqoop、hive、hbase優(yōu)先;
7、責(zé)任心強(qiáng)、思路清晰、學(xué)習(xí)力強(qiáng)。etl職位描述(模板四)
崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)的etl的工作;
2、負(fù)責(zé)數(shù)據(jù)分析工具平臺(tái)的設(shè)計(jì)和研發(fā);
3、讓數(shù)據(jù)平臺(tái)為公司的商業(yè)決策提供有效的支持。
任職要求:
1、大學(xué)本科以上學(xué)歷,3年以上工作經(jīng)驗(yàn),計(jì)算機(jī)相關(guān)專(zhuān)業(yè);
2、精通java和hive sql, 有sql性能調(diào)優(yōu)經(jīng)驗(yàn)豐富的尤佳;
3、熟悉大數(shù)據(jù)相關(guān)技術(shù),對(duì)apache hadoop/hive/hbase/sqoop/spark等組件有一定程度的了解;
4、熟悉腳本語(yǔ)言python,perl,shell中的一種或幾種;
5、好的溝通能力、團(tuán)隊(duì)精神和服務(wù)意識(shí);
6、具有強(qiáng)烈的上進(jìn)心和求知欲,優(yōu)秀的自主學(xué)習(xí)能力,自我管理能力。etl職位描述(模板五)
崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)核心結(jié)構(gòu)設(shè)計(jì),及相關(guān)數(shù)據(jù)模塊任務(wù)模塊設(shè)計(jì);
2、負(fù)責(zé)各種業(yè)務(wù)數(shù)據(jù)的etl任務(wù)及數(shù)據(jù)倉(cāng)庫(kù)部署和管理;
3、持續(xù)改進(jìn)優(yōu)化etl、分析處理、數(shù)據(jù)呈現(xiàn)等流程,協(xié)調(diào)海量數(shù)據(jù)壓力問(wèn)題;
4、保證數(shù)據(jù)安全、穩(wěn)定、可恢復(fù);
5、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)的日常維護(hù)工作。
任職要求:
1、計(jì)算機(jī)相關(guān)專(zhuān)業(yè)本科及以上學(xué)歷,三年以上模型設(shè)計(jì)相關(guān)工作經(jīng)驗(yàn),具 有金融/互聯(lián)網(wǎng)行業(yè)任職背景者優(yōu)先;
2、精通常用模型設(shè)計(jì)工具erwin、powerdesigner,熟悉tableau,pentaho 等bi軟件;
3、具有金融業(yè)bi項(xiàng)目模型設(shè)計(jì)或etl開(kāi)發(fā)經(jīng)驗(yàn)邏輯數(shù)據(jù)模型和建模經(jīng)驗(yàn);
4、熟悉掌握java/r/python語(yǔ)言,kettle組件,熟悉mysql、oracle等數(shù)據(jù) 庫(kù),能熟練進(jìn)行sql優(yōu)化;
5、有大數(shù)據(jù)處理經(jīng)驗(yàn),有hadoop/spark sql/mapreduce/hive等相關(guān)數(shù)據(jù) 處理經(jīng)驗(yàn)優(yōu)先;
6、具有良好的邏輯分析能力、語(yǔ)言表達(dá)能力。
第18篇 etl engineer職位描述與崗位職責(zé)任職要求
職位描述：
incorporated in 2017， kpmg technology r&d centre combines four functions: r&d， in-house services， outsourced services and operational services.it is kpmg’s first r&d centre and second delivery centre in china.
as kpmg’s first r&d centre in china， our business activities currently include:
- development， design， production of computer software and computer system integration;
- __， r&d and delivery of technologies
- big data-related services and technical support， including data development， data processing， data mining etc.
driven by increasing market demand， we will e_pand the r&d centre’s scope of business on an ongoing basis to enable technologies to provide quality services for our clients.
崗位職責(zé)
- 負(fù)責(zé)公司數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)etl開(kāi)發(fā)、維護(hù)、監(jiān)控、優(yōu)化
- 參與數(shù)據(jù)倉(cāng)庫(kù)建模，不斷改進(jìn)現(xiàn)有數(shù)據(jù)倉(cāng)庫(kù)
- 與bi分析師協(xié)同工作，解決數(shù)據(jù)報(bào)表、數(shù)據(jù)異常相關(guān)的技術(shù)問(wèn)題
- 根據(jù)公司要求規(guī)范，編寫(xiě)相應(yīng)的技術(shù)文檔
崗位描述
- 本科或以上學(xué)歷
- 2年以上相關(guān)工作經(jīng)驗(yàn) ，計(jì)算機(jī)或相關(guān)專(zhuān)業(yè)
- 至少熟悉datastage， informatica， odi， kettle中一種工具，有kettle或者odi使用經(jīng)驗(yàn)更佳
- 熟悉oracle ，sql server， my sql等主流數(shù)據(jù)庫(kù)系統(tǒng)
- 有金融行業(yè)工作經(jīng)驗(yàn)者優(yōu)先
第19篇 中級(jí)etl工程師崗位職責(zé)
中級(jí)etl工程師 比孚科技 上海比孚信息科技有限公司,比孚,比孚科技,比孚 職位描述:
1. 負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)/數(shù)據(jù)集市etl設(shè)計(jì)開(kāi)發(fā);
2. 負(fù)責(zé)與業(yè)務(wù)部門(mén)數(shù)據(jù)需求的溝通與確認(rèn);
任職資格:
1. 三以上工作經(jīng)驗(yàn);
2. 熟悉主流etl開(kāi)發(fā)工具,如:ssis 、kettle、datastage等;
3. 熟練掌握主流數(shù)據(jù)庫(kù)的使用,如:sql server、mysql、oracle,對(duì)sql查詢(xún)優(yōu)化有豐富的經(jīng)驗(yàn);
4. 熟悉主流報(bào)表工具,如:tableau、powerbi、cognos;
5. 良好的溝通技能,清晰的邏輯思維能力;
6. 工作認(rèn)真仔細(xì),積極主動(dòng),具備較強(qiáng)的自主學(xué)習(xí)、自我總結(jié)能力。
第20篇 etl數(shù)據(jù)分析崗位職責(zé)任職要求
etl數(shù)據(jù)分析崗位職責(zé)
職責(zé)描述:
1、與數(shù)據(jù)分析師、數(shù)據(jù)開(kāi)發(fā)工程師配合，進(jìn)行數(shù)據(jù)清洗、數(shù)據(jù)準(zhǔn)備;
2、理解數(shù)據(jù)分析及業(yè)務(wù)，設(shè)計(jì)維護(hù)數(shù)據(jù)倉(cāng)庫(kù);
3、與數(shù)據(jù)分析師配合，進(jìn)行數(shù)據(jù);
4、配合數(shù)據(jù)開(kāi)發(fā)工程師，完成模型部署后的業(yè)務(wù)驗(yàn)證、反饋。
任職要求:
1、 大學(xué)本科及以上，計(jì)算機(jī)信息類(lèi)、數(shù)學(xué)/應(yīng)用數(shù)學(xué)類(lèi)等專(zhuān)業(yè)背景;
2、3年以上工作經(jīng)驗(yàn)，具有電力/能源/工業(yè)數(shù)據(jù)分析背景的人員優(yōu)先考慮;
3、熟悉數(shù)據(jù)結(jié)構(gòu)，熟悉數(shù)據(jù)清洗、降維、變量選擇等數(shù)據(jù)準(zhǔn)備過(guò)程，能夠熟練實(shí)現(xiàn)海量數(shù)據(jù)的清洗、準(zhǔn)備;
4、對(duì)回歸、分類(lèi)、聚類(lèi)、關(guān)聯(lián)規(guī)則、時(shí)間序列、神經(jīng)網(wǎng)絡(luò)、決策樹(shù)及其他常用數(shù)據(jù)分析和挖掘技術(shù)有了解，能夠配合數(shù)據(jù)分析師開(kāi)展相關(guān)分析挖掘;
5、能夠熟練使用至少一種主流關(guān)系數(shù)據(jù)庫(kù)及結(jié)構(gòu)化查詢(xún)語(yǔ)言，熟悉hive，并了解spark、hadoop等大數(shù)據(jù)架構(gòu)環(huán)境，能夠進(jìn)行數(shù)據(jù)倉(cāng)庫(kù)建設(shè)與維護(hù);
6、熟練掌握python、r等語(yǔ)言工具中的至少一種，能夠熟練使用相關(guān)的數(shù)據(jù)分析、數(shù)據(jù)處理庫(kù);
7、有l(wèi)inu_使用經(jīng)驗(yàn)，了解shell操作。
