- 相關推薦
etl崗位職責
在現(xiàn)實社會中,崗位職責對人們來說越來越重要,崗位職責是指一個崗位所需要去完成的工作內容以及應當承擔的責任范圍,職責是職務與責任的統(tǒng)一,由授權范圍和相應的責任兩部分組成。相信很多朋友都對制定崗位職責感到非常苦惱吧,下面是小編整理的etl崗位職責,歡迎閱讀,希望大家能夠喜歡。
etl崗位職責1
etl高級工程師職位要求
1、計算機、數(shù)學或統(tǒng)計等專業(yè),本科以上學歷;
2、精通sql語言;熟悉數(shù)據(jù)倉庫設計、建模;
3、精通python,能夠編寫腳本處理、分析數(shù)據(jù);
4、熟悉批量離線式分布式并行計算技術(如hadoop、mapreduce、hive、spark等)
5、熟悉sqlserver、mysql數(shù)據(jù)庫;了解redis等非關系型數(shù)據(jù)庫;
6、熟悉至少一種常用etl工具(如kettle、ssis、gobblin);了解常用報表工具(如reporting services以及各類開源報表);
7、了解常用數(shù)據(jù)挖掘方法(回歸、決策樹、聚類等)。
etl高級工程師崗位職責
1、負責國際網(wǎng)站后臺數(shù)據(jù)倉庫搭建、維護;
2、運用各類大數(shù)據(jù)工具設計etl流程,消費生產(chǎn)環(huán)境埋點、日志等數(shù)據(jù);
3、日常數(shù)據(jù)監(jiān)控以及數(shù)據(jù)預警,異常數(shù)據(jù)解讀挖掘,并與業(yè)務同事溝通解決方案;
4、分析用戶的特征和行為數(shù)據(jù),挖掘不同類型用戶的行為特性,為實際的業(yè)務運營提供數(shù)據(jù)支持;
5、從數(shù)據(jù)分析結果中尋找insight和商業(yè)價值,并以簡明扼要的形式傳導到其他部分,指導實際的'業(yè)務運營;
6、處理國際網(wǎng)站的臨時數(shù)據(jù)需求,并對于常用重要需求轉化成數(shù)據(jù)產(chǎn)品。
etl崗位職責2
職位描述:
崗位職能:
1.基于公司數(shù)據(jù)建設需要,完成數(shù)據(jù)平臺構建、數(shù)據(jù)內容開發(fā)等工作。包括:數(shù)據(jù)平臺基礎設施建設、數(shù)據(jù)采集、etl、數(shù)倉及數(shù)據(jù)集市、數(shù)據(jù)應用產(chǎn)品等開發(fā)工作;
2.充分理解需求文檔,基于此進行自測,交付高質量的'開發(fā)代碼和數(shù)據(jù)內容;
3.工作中對數(shù)據(jù)平臺基礎設施、數(shù)據(jù)內容建設等工作主動深度思考,提升效能并積極建言、促進組織和系統(tǒng)發(fā)展;
4.其他根據(jù)部門需要安排事宜;
崗位要求:
1.信息技術類、數(shù)學、統(tǒng)計學、計量經(jīng)濟學類專業(yè),研究生及以上學歷。優(yōu)秀候選人學歷可以放寬至本科,工作年限5年以上;
2.熟悉數(shù)據(jù)倉庫模型設計和精通etl開發(fā)經(jīng)驗,掌握3nf,kimball的維度建模設計方法,具備海量數(shù)據(jù)加工處理(etl)相關經(jīng)驗;
3.掌握至少一種數(shù)據(jù)庫開發(fā)技術:oracle、teradata、db2、mysql等,精通并靈活運用sql實現(xiàn)海量數(shù)據(jù)etl加工處理;
4.熟悉linux系統(tǒng)常規(guī)shell處理命令,靈活運用shell做的文本處理和系統(tǒng)操作;
5.有從事分布式數(shù)據(jù)存儲與計算平臺應用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關技術并有相關實踐經(jīng)驗著優(yōu)先,重點考察hdfs、hive(hql)、hbase;
6.熟練掌握一門或多門編程語言,并有大型項目建設經(jīng)驗者優(yōu)先,重點考察python、perl、java;
7.熟悉數(shù)據(jù)倉庫領域知識和技能者優(yōu)先,包括但不局限于:數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質量等;
8.良好的語言溝通與表達能力和自我驅動動力。
etl崗位職責3
職位描述:
崗位職責:
1、負責項目實施過程中所對接的第三方系統(tǒng)的數(shù)據(jù)處理及質量分析,并完成項目實施過程中的etl工作;
2、熟練掌握etl設計過程,參與大數(shù)據(jù)平臺架構的'設計、開發(fā)、流程優(yōu)化及解決etl相關技術問題;
3、與用戶和項目組進行有效溝通,采集項目需求,并提出相應的解決方案;
4、負責監(jiān)控etl并解決出現(xiàn)的問題及性能調優(yōu),協(xié)助完成bi數(shù)據(jù)建模;
5、根據(jù)規(guī)范,完成項目相關設計開發(fā)文檔的整理與編寫;
任職要求:
1、統(tǒng)招全日制本科及以上學歷,具備大數(shù)據(jù)處理經(jīng)驗尤佳;
2、熟悉etl工具,具有一定項目經(jīng)驗,負責監(jiān)控etl并解決出現(xiàn)的問題及性能調優(yōu);
3、熟悉hive和hadoop;
4、具備一定的編程能力,熟悉至少一種常用編程語言,java尤佳;
5、掌握關系數(shù)據(jù)庫常見用法,熟悉常見軟件的安裝,參與過項目的etl工具開發(fā)項目的完整分析、設計、開發(fā)流程者優(yōu)先;
6、具備較強的自我學習能力、有較強分析問題的能力、人際溝通能力、團隊協(xié)作能力和工作責任感;
etl崗位職責4
職位描述:
1.基于公司數(shù)據(jù)建設需要,完成數(shù)據(jù)平臺構建、數(shù)據(jù)內容開發(fā)等工作。包括:數(shù)據(jù)平臺基礎設施建設、數(shù)據(jù)采集、etl、數(shù)倉及數(shù)據(jù)集市、數(shù)據(jù)應用產(chǎn)品等開發(fā)工作;
2.充分理解需求文檔,基于此進行自測,交付高質量的.開發(fā)代碼和數(shù)據(jù)內容;
3.工作中對數(shù)據(jù)平臺基礎設施、數(shù)據(jù)內容建設等工作主動深度思考,提升效能并積極建言、促進組織和系統(tǒng)發(fā)展;
4.團隊日常管理,及其他根據(jù)部門需要安排事宜。
崗位要求:
1.信息技術類、數(shù)學、統(tǒng)計學、計量經(jīng)濟學類專業(yè),本科,工作年限5年以上;
2.熟悉數(shù)據(jù)倉庫模型設計和精通etl開發(fā)經(jīng)驗,掌握3nf,kimball的維度建模設計方法,具備海量數(shù)據(jù)加工處理(etl)相關經(jīng)驗;
3.掌握至少一種數(shù)據(jù)庫開發(fā)技術:oracle、teradata、db2、mysql等,精通并靈活運用sql實現(xiàn)海量數(shù)據(jù)etl加工處理;
4.熟悉linux系統(tǒng)常規(guī)shell處理命令,靈活運用shell做的文本處理和系統(tǒng)操作;
5.有從事分布式數(shù)據(jù)存儲與計算平臺應用開發(fā)經(jīng)驗;
6.熟練掌握一門或多門編程語言,并有大型項目建設經(jīng)驗者優(yōu)先,重點考察python、perl、java;
7.熟悉數(shù)據(jù)倉庫領域知識和技能者優(yōu)先,包括但不局限于:數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質量等;
8.良好的語言溝通與表達能力和自我驅動動力。
注:此崗位需在杭州一個月
etl崗位職責5
職責描述:
崗位職責:
1、根據(jù)概要設計,進行詳細設計的文檔編寫;
2、負責etl過程的設計/開發(fā)實施、單元測試;
3、負責項目中etl相關需求調研、源數(shù)據(jù)調研、整體設計;
4、負責項目中環(huán)境安裝及配置。
5、維護和升級現(xiàn)有etl任務和存儲過程,快速定位并修復現(xiàn)有系統(tǒng)缺陷
職位要求:
1、大專及以上學歷,計算機相關專業(yè),3年以上etl工作經(jīng)驗。
2、熟悉etl開發(fā)流程,有hadoop和etl工作經(jīng)驗;有從傳統(tǒng)數(shù)據(jù)庫抽取數(shù)據(jù)到hive數(shù)據(jù)倉庫經(jīng)驗,了解sqoop應用原理者優(yōu)先。
3、熟悉主流數(shù)據(jù)庫sql server、oracle、db2、mysql等;熟悉開源的`etl工具。
4、有海量數(shù)據(jù)處理工作經(jīng)驗,數(shù)據(jù)分析和挖掘經(jīng)驗者優(yōu)先;
5、做過數(shù)據(jù)倉庫、ods項目,對數(shù)據(jù)治理、數(shù)據(jù)標準及元數(shù)據(jù)有很好理念及實施經(jīng)驗的優(yōu)先;
6、熟練使用腳本語言:如perl、python、shell等任意一種以上;
7、熟悉linux系統(tǒng)指令和性能優(yōu)化;
8、善于學習新技術,對新技術有較強的接受能力;工作認真細致,愿意于人交流溝通。
9、有大型數(shù)據(jù)倉庫系統(tǒng)研發(fā)、設計經(jīng)驗者優(yōu)先;
10、熟悉java語言或hadoop技術者優(yōu)先;
崗位要求:
學歷要求:大專
語言要求:不限
年齡要求:不限
工作年限:3-4年經(jīng)驗
etl崗位職責6
職位描述:
工作職責:
1、負責數(shù)據(jù)平臺的etl設計開發(fā)、工作流調度設計、存儲過程開發(fā)、自定義函數(shù)開發(fā)。
2、負責各業(yè)務系統(tǒng)數(shù)據(jù)源業(yè)務調研、數(shù)據(jù)調研、準確性完整性驗證。
3、負責項目中與第三方系統(tǒng)基于數(shù)據(jù)庫的數(shù)據(jù)對接、數(shù)據(jù)預處理、數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)導入、數(shù)據(jù)校驗相關開發(fā)工作。
4、負責數(shù)據(jù)平臺的`etl相關軟件和工具的研發(fā)和改進。
5、負責數(shù)據(jù)平臺日常管理、跑批、維護、監(jiān)控、處理臨時數(shù)據(jù)需求。
任職資格:
1、本科計算機相關專業(yè),5年工作經(jīng)驗
2、具備3年或以上etl數(shù)據(jù)處理相關開發(fā)經(jīng)驗
3、擁有3年以上sql開發(fā)
4、掌握hadoop?hive-hql?基礎技能
etl崗位職責7
職位描述:
工作職責:
1、根據(jù)公司數(shù)據(jù)分析需求進行基于hadoop平臺的項目開發(fā);
2、根據(jù)需求進行數(shù)據(jù)倉庫模型設計,熟練使用kettle工具進行etl程序的開發(fā);包括實時數(shù)據(jù)加工,計算,etl,管理,監(jiān)控等;
3、負責針對源系統(tǒng)進行數(shù)據(jù)抽取、處理、分析等相關工作,及項目中涉及到的數(shù)據(jù)庫創(chuàng)建、維護及提供數(shù)據(jù)接口工作;
4、負責設計并優(yōu)化基于hive的數(shù)據(jù)倉庫的建設;
5、制定數(shù)據(jù)庫備份和恢復策略及工作流程與規(guī)范。
6、能出具消費品品牌制造行業(yè)應用的'數(shù)據(jù)分析技術解決方案,并落地。
任職資格:
1.從事數(shù)據(jù)倉庫領域至少2年以上,熟悉數(shù)據(jù)倉庫模型設計與etl開發(fā)經(jīng)驗,具備海量數(shù)據(jù)加工處理相關經(jīng)驗;
2.熟悉數(shù)據(jù)倉庫領域知識和技能者優(yōu)先,包括但不局限于:元數(shù)據(jù)管理、數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質量、主數(shù)據(jù)管理;
3.有從事分布式數(shù)據(jù)存儲與計算平臺應用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關技術并有相關實踐經(jīng)驗著優(yōu)先,重點考察hive、hdfs、hbase;
4.熟練掌握kettlesqoop、datax、airflow等;
5.有消費品品牌制造、零售行業(yè)經(jīng)驗,尤其快消品行業(yè)和財務領域數(shù)據(jù)項目經(jīng)驗者優(yōu)先;
6.熟悉分布式計算presto/imapa優(yōu)先;
7.有實時計算方面的經(jīng)驗的優(yōu)先。
etl崗位職責8
職位描述:
工作職能:
1、負責海量數(shù)據(jù)的etl處理。
技能要求:
1、熟悉oracle數(shù)據(jù)庫及sql開發(fā);
2、精通java、shell;
3、掌握hadoop、hive、kafka、elasticsearch、flink或多項大數(shù)據(jù)開發(fā)技術;
4、有flink相關開發(fā)經(jīng)驗優(yōu)先。
福利待遇:
雙休五險一金法定節(jié)假日健身房出國旅游
免費體檢帶薪年假年終獎
etl崗位職責9
職位描述:
崗位職責:
1、數(shù)倉開發(fā)、etl開發(fā);
2、銀行業(yè)數(shù)據(jù)模型的設計輔助、mapping和落地等;
3、shell腳本開發(fā)維護;
4、銀行業(yè)務系統(tǒng)的數(shù)據(jù)調研和分析;
任職要求:
1、本科及以上學歷,計算機或相關專業(yè);
2、2年以上oracle、db2等數(shù)據(jù)庫開發(fā)經(jīng)驗,熟悉數(shù)據(jù)庫體系結構;
3、精通pl/sql編程,精通存儲過程開發(fā);
4、熟悉linux操作系統(tǒng);
5、熟悉etl調度工具和前端工具;
6、軟件基礎理論知識扎實,具備良好的數(shù)據(jù)結構、算法功底,有一定獨立分析、技術研究能力;
7、良好的`溝通能力、團隊合作精神、樂于;
8、具備較強的自學能力,有一點抗壓能力,能夠接受出差性質的工作。
如有以下技術背景優(yōu)先考慮:
1、有銀行業(yè)系統(tǒng)開發(fā)經(jīng)驗;
2、參與過數(shù)倉項目開發(fā)、實施;
3、有數(shù)據(jù)治理項目經(jīng)驗的。
etl崗位職責10
職位描述:
1、負責公司數(shù)據(jù)平臺項目的etl設計、實現(xiàn)以及優(yōu)化。
2、負責etl流程優(yōu)化,關鍵問題解決、團隊技術與引導和前瞻性技術研究;
3、參與數(shù)據(jù)倉庫數(shù)據(jù)模型設計,進行數(shù)據(jù)質量監(jiān)測、校驗和提升;
4、使用etl技術對醫(yī)院信息系統(tǒng)數(shù)據(jù)進行提取、清洗、轉換和整合;
崗位要求:
1、至少三年以上etl數(shù)據(jù)開發(fā)經(jīng)驗;計算機相關專業(yè)本科以上學歷,熟悉數(shù)據(jù)分析與數(shù)據(jù)挖掘理論;
2、熟悉dw實施方法論和常規(guī)etl構架,有整體etl開發(fā)經(jīng)驗,深刻理解元數(shù)據(jù)管理;
3、熟練掌握oracle、sql server、mysql、postgresql等至少兩種主流數(shù)據(jù)庫的使用;
4、熟練掌握ssis、kettle、informatica等至少一種etl工具的使用;
5、精通sql、存儲過程、函數(shù)的.使用,具備編寫、優(yōu)化復雜sql的能力;
6、對數(shù)字,數(shù)據(jù)敏感,具備良好的邏輯思維能力;
7、具備專業(yè)的業(yè)務研究、分析能力,能夠獨立開展業(yè)務調研、數(shù)據(jù)分析、數(shù)據(jù)建模、報告編寫工作;
8、有醫(yī)療衛(wèi)生數(shù)據(jù)平臺開發(fā)、實施經(jīng)驗優(yōu)先;
9、能適應長期出差。
etl崗位職責11
職位描述:
職責:
1.按業(yè)務分析需求進行建模;
2.進行數(shù)據(jù)倉庫需求分析、方案設計、etl裝載過程設計;
3.從業(yè)務數(shù)據(jù)庫到數(shù)據(jù)倉庫的etl開發(fā);
4.結合業(yè)務流程和需求進行數(shù)據(jù)分析;
任職資格:
1.本科以上學歷,計算機等信息技術相關專業(yè);
2.有互聯(lián)網(wǎng)金融相關工作經(jīng)驗,了解相關數(shù)據(jù)流和業(yè)務背景優(yōu)先;
3.兩年及以上數(shù)據(jù)倉庫相關工作經(jīng)驗,對數(shù)據(jù)倉庫系統(tǒng)架構具有良好的認識,熟悉數(shù)據(jù)倉庫相關技術,如etl、報表開發(fā),具備數(shù)據(jù)分析技術并具有相關項目經(jīng)驗;
4.具有hive、spark、mysql、oracle等至少一種大型數(shù)據(jù)庫的應用開發(fā)經(jīng)驗,熟悉數(shù)據(jù)標準管理、元數(shù)據(jù)管理、數(shù)據(jù)質量管理;
5.具備python統(tǒng)計和數(shù)據(jù)挖掘相關基本開發(fā)能力;
6.溝通能力好,善于規(guī)劃和總結,注重團隊合作及知識共享,能承擔一定的'工作壓力;
etl崗位職責12
bi數(shù)據(jù)分析-數(shù)據(jù)開發(fā)(etl工程師)阿里健康阿里健康科技(中國)有限公司,阿里健康,阿里健康科技(北京)有限公司,阿里數(shù)據(jù)開發(fā)
1、構建全面的、準確的、能反映服務業(yè)務線特征的整體指標體系,并基于業(yè)務監(jiān)控指標體系,及時發(fā)現(xiàn)與定位業(yè)務問題;
2、根據(jù)日常業(yè)務及產(chǎn)品團隊的'需求,提供業(yè)務監(jiān)控,業(yè)務評估的各項數(shù)據(jù)指標;
3、根據(jù)業(yè)務發(fā)展情況,從數(shù)據(jù)中發(fā)現(xiàn)業(yè)務及產(chǎn)品的問題點及機會點,給業(yè)務及產(chǎn)品提供相應的方向;
4、沉淀分析思路與框架,提煉數(shù)據(jù)產(chǎn)品需求,與相關團隊(如技術開發(fā)團隊)協(xié)作并推動數(shù)據(jù)產(chǎn)品的落地;
5、與業(yè)務協(xié)作(行業(yè)團隊)組織數(shù)據(jù)的理念、技能、工具的培訓。
崗位描述:
1.負責各條業(yè)務線數(shù)據(jù)倉庫搭建,場景梳理,數(shù)據(jù)維護;
2.負責公司內部跨部門項目數(shù)據(jù)場景梳理,資源調配工作;
3.負責從已有的數(shù)據(jù)中挖掘對業(yè)務目標起到推動作用的分析結論。
崗位要求:
1、統(tǒng)計、數(shù)學、信息技術、生物統(tǒng)計本科以上學歷,有電商bi工作經(jīng)驗優(yōu)先;
2、良好的數(shù)據(jù)敏感度,能從海量數(shù)據(jù)提煉核心結果,有數(shù)據(jù)分析、挖掘、清洗和建模的經(jīng)驗;
3、有從事分布式數(shù)據(jù)存儲與計算平臺應用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關技術并有相關開發(fā)經(jīng)驗,熟練運用sql,能高效的與數(shù)據(jù)技術團隊進行溝通者尤佳;
4、較為豐富的數(shù)據(jù)倉庫及數(shù)據(jù)平臺的架構經(jīng)驗,精通數(shù)據(jù)倉庫建模及etl設計開發(fā)。
【etl崗位職責】相關文章:
監(jiān)理崗位職責-崗位職責07-25
部長的崗位職責-崗位職責07-25
土建崗位職責-崗位職責07-25
崗位職責09-12
no崗位職責02-15
心理科崗位職責心理門診崗位職責10-26
禮儀崗位職責06-12
文秘崗位職責04-11