歡迎光臨管理者范文網(wǎng)
當前位置:管理者范文網(wǎng) > 安全管理 > 崗位職責(zé) > 工程崗位職責(zé)

etl工程師崗位職責(zé)16篇

發(fā)布時間:2022-12-07 19:24:05 查看人數(shù):23
  • 目錄

etl工程師崗位職責(zé)

第1篇 數(shù)據(jù)倉庫etl開發(fā)工程師崗位職責(zé)

數(shù)據(jù)倉庫etl資深開發(fā)工程師 1.5年以上做bi、數(shù)據(jù)倉庫etl開發(fā)方向,行業(yè)不限;

2.過去做北京汽車項目;

3.英語能基本讀寫;

4.開發(fā)經(jīng)驗豐富,能迅速完成交辦相關(guān)工作;

5.溝通能力良好,具備團隊合作精神,能適應(yīng)一定壓力開展工作。 1.5年以上做bi、數(shù)據(jù)倉庫etl開發(fā)方向,行業(yè)不限;

2.過去做北京汽車項目;

3.英語能基本讀寫;

4.開發(fā)經(jīng)驗豐富,能迅速完成交辦相關(guān)工作;

5.溝通能力良好,具備團隊合作精神,能適應(yīng)一定壓力開展工作。

第2篇 中級etl工程師崗位職責(zé)

中級etl工程師 比孚科技 上海比孚信息科技有限公司,比孚,比孚科技,比孚 職位描述:

1. 負責(zé)數(shù)據(jù)倉庫/數(shù)據(jù)集市etl設(shè)計開發(fā);

2. 負責(zé)與業(yè)務(wù)部門數(shù)據(jù)需求的溝通與確認;

任職資格:

1. 三以上工作經(jīng)驗;

2. 熟悉主流etl開發(fā)工具,如:ssis 、kettle、datastage等;

3. 熟練掌握主流數(shù)據(jù)庫的使用,如:sql server、mysql、oracle,對sql查詢優(yōu)化有豐富的經(jīng)驗;

4. 熟悉主流報表工具,如:tableau、powerbi、cognos;

5. 良好的溝通技能,清晰的邏輯思維能力;

6. 工作認真仔細,積極主動,具備較強的自主學(xué)習(xí)、自我總結(jié)能力。

第3篇 dw數(shù)據(jù)倉庫etl工程師職位描述與崗位職責(zé)任職要求

職位描述:

職責(zé)描述:

1. 負責(zé)數(shù)據(jù)倉庫開發(fā)需求收集和分析;

2. 負責(zé)數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計和開發(fā);

3. 負責(zé)數(shù)據(jù)抽取、清洗、轉(zhuǎn)化等數(shù)據(jù)處理程序開發(fā);

4. 負責(zé)對公司數(shù)據(jù)倉庫平臺整體架構(gòu)改進與流程優(yōu)化;

5. 負責(zé)bi報表開發(fā)和優(yōu)化。

任職資格:

1. 2年以上數(shù)據(jù)倉庫工作經(jīng)驗;

2. 熟悉數(shù)據(jù)庫、etl、bi建模等工具;

3. 良好編程習(xí)慣,以及較強的學(xué)習(xí)能力和溝通能力。

第4篇 etl工程師崗位職責(zé)職位要求

職責(zé)描述:

崗位職責(zé):

1、根據(jù)概要設(shè)計,進行詳細設(shè)計的文檔編寫;

2、負責(zé)etl過程的設(shè)計/開發(fā)實施、單元測試;

3、負責(zé)項目中etl相關(guān)需求調(diào)研、源數(shù)據(jù)調(diào)研、整體設(shè)計;

4、負責(zé)項目中環(huán)境安裝及配置。

5、維護和升級現(xiàn)有etl任務(wù)和存儲過程,快速定位并修復(fù)現(xiàn)有系統(tǒng)缺陷

職位要求:

1、 大專及以上學(xué)歷,計算機相關(guān)專業(yè),3年以上 etl 工作經(jīng)驗。

2、 熟悉etl開發(fā)流程,有hadoop和etl工作經(jīng)驗;有從傳統(tǒng)數(shù)據(jù)庫抽取數(shù)據(jù)到hive數(shù)據(jù)倉庫經(jīng)驗,了解sqoop應(yīng)用原理者優(yōu)先。

3、 熟悉主流數(shù)據(jù)庫sql server、oracle、db2、mysql等;熟悉開源的etl工具。

4、有海量數(shù)據(jù)處理工作經(jīng)驗,數(shù)據(jù)分析和挖掘經(jīng)驗者優(yōu)先;

5、做過數(shù)據(jù)倉庫、ods項目,對數(shù)據(jù)治理、數(shù)據(jù)標準及元數(shù)據(jù)有很好理念及實施經(jīng)驗的優(yōu)先;

6、熟練使用腳本語言:如perl、python、shell等任意一種以上;

7、熟悉linu_系統(tǒng)指令和性能優(yōu)化;

8、善于學(xué)習(xí)新技術(shù),對新技術(shù)有較強的接受能力;工作認真細致,愿意于人交流溝通。

9、有大型數(shù)據(jù)倉庫系統(tǒng)研發(fā)、設(shè)計經(jīng)驗者優(yōu)先;

10、熟悉 java 語言或 hadoop 技術(shù)者優(yōu)先;

崗位要求:

學(xué)歷要求:大專

語言要求:不限

年齡要求:不限

工作年限:3-4年經(jīng)驗

第5篇 etl研發(fā)工程師崗位職責(zé)

大數(shù)據(jù)研發(fā)工程師(etl) 永輝云創(chuàng) 永輝云創(chuàng)科技有限公司,永輝云創(chuàng),超級物種,永輝云創(chuàng) 職責(zé)描述:

1、負責(zé)大數(shù)據(jù)平臺的設(shè)計以及開發(fā)工作,維護升級等等;

2、負責(zé)離線/實時的數(shù)據(jù)存儲和加工處理,保證數(shù)據(jù)質(zhì)量,負責(zé)數(shù)據(jù)監(jiān)體系的建立和維護;

2、負責(zé)海量數(shù)據(jù)的清洗、處理和挖掘工作,支持數(shù)據(jù)分析師和算法工程師的數(shù)據(jù)需求;

3、對數(shù)據(jù)敏感,基于海量數(shù)據(jù)進行業(yè)務(wù)分析,靈活運用可視化工具,參與產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā),分析數(shù)據(jù)成因,發(fā)掘數(shù)據(jù)商業(yè)價值;

4、研究前沿技術(shù),解決實際場景中的業(yè)務(wù)問題,優(yōu)化離線/實時大數(shù)據(jù)計算任務(wù)的性能。

任職要求:

1、計算機或相關(guān)專業(yè)本科及以上學(xué)歷,3年以上大數(shù)據(jù)開發(fā)經(jīng)驗;

2、熟悉linu_/uni_開發(fā)環(huán)境,精通python/java/scala/shell兩種以上;

3、熟悉常用開源分布式系統(tǒng),對hadoop/hive/spark/storm/flink/hbase/kylin中的一項或多項有深入了解;,能夠獨立排查及解決分布式系統(tǒng)的問題;

4、良好的團隊精神和合作意識,強烈的責(zé)任心,對工作有激情,良好的溝通能力,能吃苦耐勞;

5、有2年以上的電商領(lǐng)域的優(yōu)先。

第6篇 etl研發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述:

崗位職責(zé)

1.負責(zé)數(shù)據(jù)倉庫模型設(shè)計和優(yōu)化,基于hadoop/hive/odps(ma_couputer)、adb等進行數(shù)據(jù)倉庫etl開發(fā)和維護工作;

2.負責(zé)日常作業(yè)的部署和調(diào)度研發(fā)及維護工作;

3.負責(zé)制定數(shù)據(jù)標準制定,數(shù)據(jù)質(zhì)量標準,從而有效的進行數(shù)據(jù)治理工作。

4.負責(zé)各類業(yè)務(wù)數(shù)據(jù)的etl任務(wù)及數(shù)據(jù)倉庫部署和管理,持續(xù)改進優(yōu)化etl、分析處理、數(shù)據(jù)呈現(xiàn)等流程,協(xié)調(diào)海量數(shù)據(jù)壓力問題;

任職資格

1.三年以上數(shù)據(jù)倉庫/etl/數(shù)據(jù)處理相關(guān)開發(fā)經(jīng)驗;

2.具備mysql、oracle或hive等主流平臺的數(shù)據(jù)開發(fā)及調(diào)優(yōu)經(jīng)驗,熟悉python或java優(yōu)先;

3.具備良好的學(xué)習(xí)能力,善于溝通,具備較強的業(yè)務(wù)推動能力和執(zhí)行力;

4.熟悉數(shù)據(jù)倉庫體系架構(gòu)、建模理論和模型設(shè)計思路,能用于項目實踐;

5.有良好的快速學(xué)習(xí)能力和團隊協(xié)作能力;

6.有java或python項目研發(fā)經(jīng)驗者先考慮;

7.有產(chǎn)品意識,善于溝通,積極主動,能夠以目標為導(dǎo)向理解工作中相關(guān)任務(wù)的處理優(yōu)先級關(guān)系。

第7篇 etl數(shù)據(jù)工程師職位描述與崗位職責(zé)任職要求

職位描述:

職責(zé):

1. 按業(yè)務(wù)分析需求進行建模;

2. 進行數(shù)據(jù)倉庫需求分析、方案設(shè)計、etl裝載過程設(shè)計;

3. 從業(yè)務(wù)數(shù)據(jù)庫到數(shù)據(jù)倉庫的etl開發(fā);

4. 結(jié)合業(yè)務(wù)流程和需求進行數(shù)據(jù)分析;

任職資格:

1. 本科以上學(xué)歷,計算機等信息技術(shù)相關(guān)專業(yè);

2. 有互聯(lián)網(wǎng)金融相關(guān)工作經(jīng)驗,了解相關(guān)數(shù)據(jù)流和業(yè)務(wù)背景優(yōu)先;

3. 兩年及以上數(shù)據(jù)倉庫相關(guān)工作經(jīng)驗,對數(shù)據(jù)倉庫系統(tǒng)架構(gòu)具有良好的認識,熟悉數(shù)據(jù)倉庫相關(guān)技術(shù),如 etl、報表開發(fā),具備數(shù)據(jù)分析技術(shù)并具有相關(guān)項目經(jīng)驗;

4. 具有hive、spark、mysql、oracle等至少一種大型數(shù)據(jù)庫的應(yīng)用開發(fā)經(jīng)驗,熟悉數(shù)據(jù)標準管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理;

5. 具備python統(tǒng)計和數(shù)據(jù)挖掘相關(guān)基本開發(fā)能力;

6. 溝通能力好,善于規(guī)劃和總結(jié),注重團隊合作及知識共享,能承擔(dān)一定的工作壓力;

第8篇 etl/bi工程師職位描述與崗位職責(zé)任職要求

職位描述:

崗位職責(zé):

1、數(shù)倉開發(fā)、etl開發(fā);

2、銀行業(yè)數(shù)據(jù)模型的設(shè)計輔助、mapping和落地等;

3、shell腳本開發(fā)維護;

4、銀行業(yè)務(wù)系統(tǒng)的數(shù)據(jù)調(diào)研和分析;

任職要求:

1、本科及以上學(xué)歷,計算機或相關(guān)專業(yè);

2、2年以上oracle、db2等數(shù)據(jù)庫開發(fā)經(jīng)驗,熟悉數(shù)據(jù)庫體系結(jié)構(gòu);

3、精通pl/sql編程,精通存儲過程開發(fā);

4、熟悉linu_操作系統(tǒng);

5、熟悉etl調(diào)度工具和前端工具;

6、軟件基礎(chǔ)理論知識扎實,具備良好的數(shù)據(jù)結(jié)構(gòu)、算法功底,有一定獨立分析、技術(shù)研究能力;

7、良好的溝通能力、團隊合作精神、樂于;

8、具備較強的自學(xué)能力,有一點抗壓能力,能夠接受出差性質(zhì)的工作。

如有以下技術(shù)背景優(yōu)先考慮:

1、有銀行業(yè)系統(tǒng)開發(fā)經(jīng)驗;

2、參與過數(shù)倉項目開發(fā)、實施;

3、有數(shù)據(jù)治理項目經(jīng)驗的。

第9篇 數(shù)據(jù)倉庫/etl/bi工程師職位描述與崗位職責(zé)任職要求

職位描述:

職責(zé)描述:

1、負責(zé)數(shù)據(jù)倉庫建模,業(yè)務(wù)數(shù)據(jù)集市建設(shè)開發(fā)

2、負責(zé)數(shù)據(jù)倉庫etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問題、etl流程監(jiān)控,保障數(shù)據(jù)平臺架構(gòu)穩(wěn)定性

3、建立數(shù)據(jù)分析指標體系,不斷完善指標體系和分析模型;

4、通過專項分析,輸出專項分析報告

5、負責(zé)數(shù)據(jù)分析相關(guān)需求和數(shù)據(jù)測試的工作

任職要求:

學(xué)歷要求:

全日制統(tǒng)考類本科及以上學(xué)歷,計算機、通信、電子、軟件工程、統(tǒng)計學(xué)、應(yīng)用數(shù)學(xué)、數(shù)據(jù)分析等相關(guān)專業(yè)

專業(yè)技能:

1、熟悉數(shù)據(jù)倉庫各類模型建模理論,熟悉數(shù)據(jù)倉庫數(shù)據(jù)分層架構(gòu)和多維數(shù)據(jù)模型設(shè)計;

2、豐富的數(shù)據(jù)分析經(jīng)驗,熟練掌握sql、hql、sparksql,擅長運用其分析并完成復(fù)雜業(yè)務(wù)數(shù)據(jù)查詢

3、掌握至少一種數(shù)據(jù)庫開發(fā)技術(shù):mysql/oracle/db2等,靈活運用sql實現(xiàn)海量數(shù)據(jù)etl加工處理;

4、熟悉hadoop生態(tài)(如:hdfs/mapreduce/hive/hbase等),并有相關(guān)實踐經(jīng)驗;

5、熟練掌握一門或多門編程語言(如:python/shell/java/c++等),并有大型項目建設(shè)經(jīng)驗者優(yōu)先;

素質(zhì):

1、敏銳的數(shù)據(jù)觀察和分析能力,及時發(fā)現(xiàn)和分析其中隱含的變化和問題并給出建議;

2、良好的溝通能力和團隊精神,較強的學(xué)習(xí)能力,能承擔(dān)一定的工作壓力。

經(jīng)驗:

至少2年以上數(shù)據(jù)倉庫(離線&實時)模型設(shè)計開發(fā)、etl設(shè)計開發(fā)的相關(guān)經(jīng)驗,有通信運營商o域/b域大數(shù)據(jù)、智慧城市大數(shù)據(jù)的數(shù)據(jù)倉庫、etl設(shè)計研發(fā)經(jīng)驗者優(yōu)先'

第10篇 大數(shù)據(jù)開發(fā)高級工程師-etl方向職位描述與崗位職責(zé)任職要求

職位描述:

工作職責(zé):

1、 根據(jù)公司數(shù)據(jù)分析需求進行基于hadoop 平臺的項目開發(fā);

2、 根據(jù)需求進行數(shù)據(jù)倉庫模型設(shè)計,熟練使用kettle工具進行etl程序的開發(fā);包括實時數(shù)據(jù)加工,計算,etl,管理, 監(jiān)控等;

3、 負責(zé)針對源系統(tǒng)進行數(shù)據(jù)抽取、處理、分析等相關(guān)工作,及項目中涉及到的數(shù)據(jù)庫創(chuàng)建、維護及提供數(shù)據(jù)接口工作;

4、 負責(zé)設(shè)計并優(yōu)化基于hive 的數(shù)據(jù)倉庫的建設(shè);

5、 制定數(shù)據(jù)庫備份和恢復(fù)策略及工作流程與規(guī)范。

6、能出具消費品品牌制造行業(yè)應(yīng)用的數(shù)據(jù)分析技術(shù)解決方案,并落地。

任職資格:

1.從事數(shù)據(jù)倉庫領(lǐng)域至少2年以上,熟悉數(shù)據(jù)倉庫模型設(shè)計與etl開發(fā)經(jīng)驗 ,具備海量數(shù)據(jù)加工處理相關(guān)經(jīng)驗;

2. 熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先,包括但不局限于:元數(shù)據(jù)管理、數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理;

3.有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗著優(yōu)先,重點考察hive、hdfs、hbase;

4. 熟練掌握kettlesqoop、data_、airflow等;

5. 有消費品品牌制造、零售行業(yè)經(jīng)驗,尤其快消品行業(yè)和財務(wù)領(lǐng)域數(shù)據(jù)項目經(jīng)驗者優(yōu)先;

6. 熟悉分布式計算presto/imapa優(yōu)先;

7.有實時計算方面的經(jīng)驗的優(yōu)先。

第11篇 etl高級工程師崗位職責(zé)及相關(guān)職位要求

etl高級工程師職位要求

1、計算機、數(shù)學(xué)或統(tǒng)計等專業(yè),本科以上學(xué)歷;

2、精通sql語言;熟悉數(shù)據(jù)倉庫設(shè)計、建模;

3、精通python,能夠編寫腳本處理、分析數(shù)據(jù);

4、熟悉批量離線式分布式并行計算技術(shù)(如hadoop、mapreduce、hive、spark等)

5、熟悉sqlserver、mysql數(shù)據(jù)庫;了解redis等非關(guān)系型數(shù)據(jù)庫;

6、熟悉至少一種常用etl工具(如kettle、ssis、gobblin);了解常用報表工具(如reporting services以及各類開源報表);

7、了解常用數(shù)據(jù)挖掘方法(回歸、決策樹、聚類等)。

etl高級工程師崗位職責(zé)

1、負責(zé)國際網(wǎng)站后臺數(shù)據(jù)倉庫搭建、維護;

2、運用各類大數(shù)據(jù)工具設(shè)計etl流程,消費生產(chǎn)環(huán)境埋點、日志等數(shù)據(jù);

3、日常數(shù)據(jù)監(jiān)控以及數(shù)據(jù)預(yù)警,異常數(shù)據(jù)解讀挖掘,并與業(yè)務(wù)同事溝通解決方案;

4、分析用戶的特征和行為數(shù)據(jù),挖掘不同類型用戶的行為特性,為實際的業(yè)務(wù)運營提供數(shù)據(jù)支持;

5、從數(shù)據(jù)分析結(jié)果中尋找insight和商業(yè)價值,并以簡明扼要的形式傳導(dǎo)到其他部分,指導(dǎo)實際的業(yè)務(wù)運營;

6、處理國際網(wǎng)站的臨時數(shù)據(jù)需求,并對于常用重要需求轉(zhuǎn)化成數(shù)據(jù)產(chǎn)品。

第12篇 高級/資深etl工程師職位描述與崗位職責(zé)任職要求

職位描述:

崗位職能:

1. 基于公司數(shù)據(jù)建設(shè)需要,完成數(shù)據(jù)平臺構(gòu)建、數(shù)據(jù)內(nèi)容開發(fā)等工作。包括:數(shù)據(jù)平臺基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開發(fā)工作;

2. 充分理解需求文檔,基于此進行自測,交付高質(zhì)量的開發(fā)代碼和數(shù)據(jù)內(nèi)容;

3. 工作中對數(shù)據(jù)平臺基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動深度思考,提升效能并積極建言、促進組織和系統(tǒng)發(fā)展;

4. 其他根據(jù)部門需要安排事宜;

崗位要求:

1. 信息技術(shù)類、數(shù)學(xué)、統(tǒng)計學(xué)、計量經(jīng)濟學(xué)類專業(yè),研究生及以上學(xué)歷。優(yōu)秀候選人學(xué)歷可以放寬至本科,工作年限5年以上;

2. 熟悉數(shù)據(jù)倉庫模型設(shè)計和精通etl開發(fā)經(jīng)驗 ,掌握3nf,kimball的維度建模設(shè)計方法,具備海量數(shù)據(jù)加工處理(etl)相關(guān)經(jīng)驗 ;

3. 掌握至少一種數(shù)據(jù)庫開發(fā)技術(shù):oracle、teradata、db2、mysql等,精通并靈活運用sql實現(xiàn)海量數(shù)據(jù)etl加工處理 ;

4. 熟悉linu_系統(tǒng)常規(guī)shell處理命令,靈活運用shell做的文本處理和系統(tǒng)操作 ;

5. 有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗著優(yōu)先,重點考察hdfs、hive(hql)、hbase ;

6. 熟練掌握一門或多門編程語言,并有大型項目建設(shè)經(jīng)驗者優(yōu)先,重點考察python、perl、java ;

7. 熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先,包括但不局限于:數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量等;

8. 良好的語言溝通與表達能力和自我驅(qū)動動力。

第13篇 etl數(shù)據(jù)工程師崗位職責(zé)

etl數(shù)據(jù)開發(fā)工程師 etl數(shù)據(jù)開發(fā)工程師

崗位職責(zé):

1、負責(zé)大數(shù)據(jù)、bi系統(tǒng)相關(guān)模塊的實施,項目管理工作,包括但不限于需求管理、項目規(guī)劃、過程實施、上線驗收、交付運營等;

2、依據(jù)業(yè)務(wù)場景、分析需求提供技術(shù)、業(yè)務(wù)解決方案并加以實現(xiàn);

3、與技術(shù)部門對接,解決數(shù)據(jù)建模、報表和報告在系統(tǒng)開發(fā)遇到的問題;

4、協(xié)助項目經(jīng)理進行項目交付或協(xié)助商務(wù)開展售前支持或poc工作。

任職資格:

1、本科及以上學(xué)歷,計算機、統(tǒng)計學(xué)、應(yīng)用數(shù)學(xué)等相關(guān)專業(yè);

2、熟悉hadoop平臺,2年以上hive、sqoop開發(fā)經(jīng)驗;

3、了解bi系統(tǒng),有數(shù)據(jù)管理經(jīng)驗,有維度建模相關(guān)經(jīng)驗;

4、3年以上相關(guān)工作經(jīng)驗,有銀行或金融數(shù)據(jù)分析經(jīng)驗者優(yōu)先;

5、熟悉db2、oracle等數(shù)據(jù)庫及sql數(shù)據(jù)查詢,熟悉hadoop者優(yōu)先;

6、熟悉linu_開發(fā)環(huán)境和shell腳本;

7、具備銀行項目設(shè)計、開發(fā)、優(yōu)化等經(jīng)驗者加分;

8、優(yōu)秀的業(yè)務(wù)理解能力、邏輯性和溝通能力,能跨部門合作溝通。

etl數(shù)據(jù)開發(fā)工程師

崗位職責(zé):

1、負責(zé)大數(shù)據(jù)、bi系統(tǒng)相關(guān)模塊的實施,項目管理工作,包括但不限于需求管理、項目規(guī)劃、過程實施、上線驗收、交付運營等;

2、依據(jù)業(yè)務(wù)場景、分析需求提供技術(shù)、業(yè)務(wù)解決方案并加以實現(xiàn);

3、與技術(shù)部門對接,解決數(shù)據(jù)建模、報表和報告在系統(tǒng)開發(fā)遇到的問題;

4、協(xié)助項目經(jīng)理進行項目交付或協(xié)助商務(wù)開展售前支持或poc工作。

任職資格:

1、本科及以上學(xué)歷,計算機、統(tǒng)計學(xué)、應(yīng)用數(shù)學(xué)等相關(guān)專業(yè);

2、熟悉hadoop平臺,2年以上hive、sqoop開發(fā)經(jīng)驗;

3、了解bi系統(tǒng),有數(shù)據(jù)管理經(jīng)驗,有維度建模相關(guān)經(jīng)驗;

4、3年以上相關(guān)工作經(jīng)驗,有銀行或金融數(shù)據(jù)分析經(jīng)驗者優(yōu)先;

5、熟悉db2、oracle等數(shù)據(jù)庫及sql數(shù)據(jù)查詢,熟悉hadoop者優(yōu)先;

6、熟悉linu_開發(fā)環(huán)境和shell腳本;

7、具備銀行項目設(shè)計、開發(fā)、優(yōu)化等經(jīng)驗者加分;

8、優(yōu)秀的業(yè)務(wù)理解能力、邏輯性和溝通能力,能跨部門合作溝通。

第14篇 etl工程師職位描述與崗位職責(zé)任職要求

職位描述:

職責(zé)描述:

1、負責(zé)數(shù)據(jù)分析、加工、清理、處理程序的開發(fā)

2、負責(zé)數(shù)據(jù)相關(guān)平臺的搭建、開發(fā)、維護、優(yōu)化

3、分布式平臺應(yīng)用開發(fā)(hadoop/spark/hive/hbase)

4、開發(fā)數(shù)據(jù)統(tǒng)計系統(tǒng),各類統(tǒng)計程序報表。

任職要求:

1、2年以上java或python開發(fā)工作經(jīng)驗,java基礎(chǔ)扎實;

2、熟悉常見在線與離線大數(shù)據(jù)系統(tǒng), 如hive, hbase, es, kafka等的工作原理與開發(fā)調(diào)優(yōu); 具有mapreduce開發(fā)經(jīng)驗,有實際大數(shù)據(jù)項目經(jīng)驗;

3、熟練掌握oracle、mysql等主流數(shù)據(jù)庫上的開發(fā);

4、具有良好的溝通能力、組織能力及團隊協(xié)作精神,有較強的分析和解決問題的能力.

第15篇 etl工程師(中級數(shù)據(jù)倉庫工程師)職位描述與崗位職責(zé)任職要求

職位描述:

職責(zé)描述:

1、 負責(zé)數(shù)據(jù)倉庫建模和etl技術(shù)工作,參與數(shù)據(jù)項目各類數(shù)據(jù)源etl的接口設(shè)計和文檔、流程規(guī)范;

2、負責(zé)項目中數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)校驗相關(guān)開發(fā)工作;

3. 配合使用主流數(shù)據(jù)挖掘工具、etl工具、bi展現(xiàn)的設(shè)計和開發(fā);

4、 能夠按照公司全面質(zhì)量管理的要求,高質(zhì)量地完成各類技術(shù)支持工作。

任職要求:

1.計算機相關(guān)專業(yè)本科以上學(xué)歷,3年以上工作經(jīng)驗;

2.熟悉etl開發(fā)、數(shù)據(jù)倉庫設(shè)計流程,熟悉mysql、oracle, ms sql server等主流數(shù)據(jù)庫,表結(jié)構(gòu)設(shè)計,存儲過程編寫;

3.有一定的sql調(diào)優(yōu)知識和經(jīng)驗,具有bi相關(guān)知識;

4.有hana、hive經(jīng)驗優(yōu)先;

5.具備財務(wù)基礎(chǔ)知識或者erp基礎(chǔ)知識者優(yōu)先;

第16篇 etl工程師 - 銀行監(jiān)管報表職位描述與崗位職責(zé)任職要求

職位描述:

職責(zé)描述:

overview

we are a leading provider of collateral management and regulatory compliance software solutions to banks and financial institutions on a worldwide basis. we are currently seeking a consultant, to be based in our singapore office to be responsible for providing consultancy to our clients in relation to their regulatory reporting requirements for the monetary authority of singapore.

main role & responsibilities

?be part of the specialist team which provide regulatory subject matter e_pertise to clients

?keep abreast of any regulatory changes advised by the regulator

?support the senior consultant at client workshops to identify data requirements and how they map to the agile reporter data model.

?use etl tool to map and transform client data such as to satisfy the project scope and specification within the timetable set by and agreed with the project manager/senior consultant.

?report to the project manager/senior consultant any delays or e_pected delays to a project, whether due to internal or customer delays, and in particular to highlight any potential scheduling conflicts that could result in such a delay.

?perform product testing as requested by the line manager to be completed within the deadlines set.

任職要求:

?degree level

?2+ years e_perience in etl/bi

?e_perience with rdbms software (e.g. sql server, oracle)

?previous e_perience of the implementation of major regulatory changes is a plus

?basic knowledge of hkma, mas or apra reporting is a plus

languages

?english

?chinese (mandarin)

etl工程師崗位職責(zé)16篇

職位描述:工作職責(zé):1、根據(jù)公司數(shù)據(jù)分析需求進行基于hadoo平臺的項目開發(fā);2、根據(jù)需求進行數(shù)據(jù)倉庫模型設(shè)計,熟練使用kettle工具進行etl程序的開發(fā);包括實時數(shù)據(jù)加工,計算,etl,管理,監(jiān)控等;3、負責(zé)針對源系統(tǒng)進行數(shù)據(jù)抽取、處理、分析等相關(guān)工作,及項目中涉及到的數(shù)據(jù)庫創(chuàng)建、維護及提供數(shù)據(jù)接…
推薦度:
點擊下載文檔文檔為doc格式

相關(guān)etl信息

  • etl開發(fā)工程師崗位職責(zé)3篇
  • etl開發(fā)工程師崗位職責(zé)3篇75人關(guān)注

    職位描述:工作職能:1、負責(zé)海量數(shù)據(jù)的etl處理。技能要求:1、熟悉oracle數(shù)據(jù)庫及sql開發(fā);2、精通java、shell;3、掌握hadoo、hive、kafka、elasticsearch、flink或多項 ...[更多]

  • etl工程師崗位職責(zé)16篇
  • etl工程師崗位職責(zé)16篇23人關(guān)注

    職位描述:工作職責(zé):1、根據(jù)公司數(shù)據(jù)分析需求進行基于hadoo平臺的項目開發(fā);2、根據(jù)需求進行數(shù)據(jù)倉庫模型設(shè)計,熟練使用kettle工具進行etl程序的開發(fā);包括實時數(shù)據(jù)加工, ...[更多]

工程崗位職責(zé)熱門信息