etl工程師崗位職責

etl工程師崗位職責（通用20篇）

　　在當今社會生活中，接觸到崗位職責的地方越來越多，崗位職責是一個具象化的工作描述，可將其歸類于不同職位類型范疇。到底應如何制定崗位職責呢？以下是小編精心整理的etl工程師崗位職責，僅供參考，希望能夠幫助到大家。

　　etl工程師崗位職責 篇1

　　職位描述：

　　工作職責:

　　1、根據公司數據分析需求進行基于hadoop平臺的項目開發；

　　2、根據需求進行數據倉庫模型設計，熟練使用kettle工具進行etl程序的開發；包括實時數據加工，計算，etl，管理，監控等；

　　3、負責針對源系統進行數據抽取、處理、分析等相關工作，及項目中涉及到的數據庫創建、維護及提供數據接口工作；

　　4、負責設計并優化基于hive的數據倉庫的建設；

　　5、制定數據庫備份和恢復策略及工作流程與規范。

　　6、能出具消費品品牌制造行業應用的'數據分析技術解決方案，并落地。

　　任職資格:

　　1、從事數據倉庫領域至少2年以上，熟悉數據倉庫模型設計與etl開發經驗，具備海量數據加工處理相關經驗；

　　2、熟悉數據倉庫領域知識和技能者優先，包括但不局限于：元數據管理、數據開發測試工具與方法、數據質量、主數據管理；

　　3、有從事分布式數據存儲與計算平臺應用開發經驗，熟悉hadoop生態相關技術并有相關實踐經驗著優先，重點考察hive、hdfs、hbase;

　　4、熟練掌握kettlesqoop、datax、airflow等;

　　5、有消費品品牌制造、零售行業經驗，尤其快消品行業和財務領域數據項目經驗者優先;

　　6、熟悉分布式計算presto/imapa優先;

　　7、有實時計算方面的經驗的優先。

　　etl工程師崗位職責 篇2

　　職責描述：

　　1、負責數據倉庫建模，業務數據集市建設開發

　　2、負責數據倉庫etl流程的優化及解決etl相關技術問題、etl流程監控，保障數據平臺架構穩定性

　　3、建立數據分析指標體系，不斷完善指標體系和分析模型；

　　4、通過專項分析，輸出專項分析報告

　　5、負責數據分析相關需求和數據測試的工作

　　任職要求：

　　學歷要求：

　　全日制統考類本科及以上學歷，計算機、通信、電子、軟件工程、統計學、應用數學、數據分析等相關專業

　　專業技能：

　　1、熟悉數據倉庫各類模型建模理論，熟悉數據倉庫數據分層架構和多維數據模型設計；

　　2、豐富的數據分析經驗，熟練掌握sql、hql、sparksql，擅長運用其分析并完成復雜業務數據查詢

　　3、掌握至少一種數據庫開發技術：mysql/oracle/db2等，靈活運用sql實現海量數據etl加工處理；

　　4、熟悉hadoop生態（如：hdfs/mapreduce/hive/hbase等），并有相關實踐經驗；

　　5、熟練掌握一門或多門編程語言（如：python/shell/java/c++等），并有大型項目建設經驗者優先；

　　素質：

　　1、敏銳的數據觀察和分析能力，及時發現和分析其中隱含的`變化和問題并給出建議；

　　2、良好的溝通能力和團隊精神，較強的學習能力，能承擔一定的工作壓力。

　　經驗：

　　至少2年以上數據倉庫（離線&實時）模型設計開發、etl設計開發的相關經驗，有通信運營商o域/b域大數據、智慧城市大數據的數據倉庫、etl設計研發經驗者優先

　　etl工程師崗位職責 篇3

　　職位描述:

　　1、負責數據倉庫/數據集市etl設計開發;

　　2、負責與業務部門數據需求的溝通與確認;

　　任職資格:

　　1、三以上工作經驗;

　　2、熟悉主流etl開發工具,如:ssis、kettle、datastage等;

　　3、熟練掌握主流數據庫的使用,如:sqlserver、mysql、oracle,對sql查詢優化有豐富的經驗;

　　4、熟悉主流報表工具,如:tableau、powerbi、cognos;

　　5、良好的.溝通技能,清晰的邏輯思維能力;

　　6、工作認真仔細,積極主動,具備較強的自主學習、自我總結能力。

　　etl工程師崗位職責 篇4

　　崗位職能：

　　1、基于公司數據建設需要，完成數據平臺構建、數據內容開發等工作。包括：數據平臺基礎設施建設、數據采集、etl、數倉及數據集市、數據應用產品等開發工作；

　　2、充分理解需求文檔，基于此進行自測，交付高質量的'開發代碼和數據內容；

　　3、工作中對數據平臺基礎設施、數據內容建設等工作主動深度思考，提升效能并積極建言、促進組織和系統發展；

　　4、其他根據部門需要安排事宜；

　　崗位要求：

　　1、信息技術類、數學、統計學、計量經濟學類專業，研究生及以上學歷。優秀候選人學歷可以放寬至本科，工作年限5年以上；

　　2、熟悉數據倉庫模型設計和精通etl開發經驗，掌握3nf，kimball的維度建模設計方法，具備海量數據加工處理（etl）相關經驗；

　　3、掌握至少一種數據庫開發技術：oracle、teradata、db2、mysql等，精通并靈活運用sql實現海量數據etl加工處理；

　　4、熟悉linux系統常規shell處理命令，靈活運用shell做的文本處理和系統操作；

　　5、有從事分布式數據存儲與計算平臺應用開發經驗，熟悉hadoop生態相關技術并有相關實踐經驗著優先，重點考察hdfs、hive（hql)、hbase；

　　6、熟練掌握一門或多門編程語言，并有大型項目建設經驗者優先，重點考察python、perl、java；

　　7、熟悉數據倉庫領域知識和技能者優先，包括但不局限于：數據開發測試工具與方法、數據質量等；

　　8、良好的語言溝通與表達能力和自我驅動動力。

　　etl工程師崗位職責 篇5

　　職責描述：

　　1、負責數據分析、加工、清理、處理程序的開發

　　2、負責數據相關平臺的搭建、開發、維護、優化

　　3、分布式平臺應用開發（hadoop/spark/hive/hbase）

　　4、開發數據統計系統，各類統計程序報表。

　　任職要求：

　　1、2年以上java或python開發工作經驗，java基礎扎實；

　　2、熟悉常見在線與離線大數據系統，如hive，hbase，es，kafka等的工作原理與開發調優;具有mapreduce開發經驗，有實際大數據項目經驗；

　　3、熟練掌握oracle、mysql等主流數據庫上的.開發；

　　4、具有良好的溝通能力、組織能力及團隊協作精神，有較強的分析和解決問題的能力。

　　etl工程師崗位職責 篇6

　　崗位職責:

　　1、負責大數據、bi系統相關模塊的實施,項目管理工作,包括但不限于需求管理、項目規劃、過程實施、上線驗收、交付運營等;

　　2、依據業務場景、分析需求提供技術、業務解決方案并加以實現;

　　3、與技術部門對接,解決數據建模、報表和報告在系統開發遇到的.問題;

　　4、協助項目經理進行項目交付或協助商務開展售前支持或poc工作。

　　任職資格:

　　1、本科及以上學歷,計算機、統計學、應用數學等相關專業;

　　2、熟悉hadoop平臺,2年以上hive、sqoop開發經驗;

　　3、了解bi系統,有數據管理經驗,有維度建模相關經驗;

　　4、3年以上相關工作經驗,有銀行或金融數據分析經驗者優先;

　　5、熟悉db2、oracle等數據庫及sql數據查詢,熟悉hadoop者優先;

　　6、熟悉linux開發環境和shell腳本;

　　7、具備銀行項目設計、開發、優化等經驗者加分;

　　8、優秀的業務理解能力、邏輯性和溝通能力,能跨部門合作溝通。

　　etl工程師崗位職責 篇7

　　崗位職責

　　1、負責數據倉庫模型設計和優化，基于hadoop／hive／odps(maxcouputer)、adb等進行數據倉庫etl開發和維護工作；

　　2、負責日常作業的部署和調度研發及維護工作；

　　3、負責制定數據標準制定，數據質量標準，從而有效的進行數據治理工作。

　　4、負責各類業務數據的etl任務及數據倉庫部署和管理，持續改進優化etl、分析處理、數據呈現等流程，協調海量數據壓力問題。

　　任職資格

　　1、三年以上數據倉庫／etl／數據處理相關開發經驗；

　　2、具備mysql、oracle或hive等主流平臺的數據開發及調優經驗，熟悉python或java優先；

　　3、具備良好的學習能力，善于溝通，具備較強的業務推動能力和執行力；

　　4、熟悉數據倉庫體系架構、建模理論和模型設計思路，能用于項目實踐；

　　5、有良好的'快速學習能力和團隊協作能力；

　　6、有java或python項目研發經驗者先考慮；

　　7、有產品意識，善于溝通，積極主動，能夠以目標為導向理解工作中相關任務的處理優先級關系。

　　etl工程師崗位職責 篇8

　　職責描述：

　　1、負責數據倉庫建模和etl技術工作，參與數據項目各類數據源etl的接口設計和文檔、流程規范；

　　2、負責項目中數據清洗、數據處理、數據校驗相關開發工作；

　　3、配合使用主流數據挖掘工具、etl工具、bi展現的設計和開發；

　　4、能夠按照公司全面質量管理的要求，高質量地完成各類技術支持工作。

　　任職要求：

　　1、計算機相關專業本科以上學歷，3年以上工作經驗；

　　2、熟悉etl開發、數據倉庫設計流程，熟悉mysql、oracle，mssqlserver等主流數據庫，表結構設計，存儲過程編寫；

　　3、有一定的.sql調優知識和經驗，具有bi相關知識；

　　4、有hana、hive經驗優先；

　　5、具備財務基礎知識或者erp基礎知識者優先；

　　etl工程師崗位職責 篇9

　　崗位職責：

　　1、數倉開發、etl開發；

　　2、銀行業數據模型的設計輔助、mapping和落地等；

　　3、shell腳本開發維護；

　　4、銀行業務系統的數據調研和分析。

　　任職要求：

　　1、本科及以上學歷，計算機或相關專業；

　　2、2年以上oracle、db2等數據庫開發經驗，熟悉數據庫體系結構；

　　3、精通pl/sql編程，精通存儲過程開發；

　　4、熟悉linux操作系統；

　　5、熟悉etl調度工具和前端工具；

　　6、軟件基礎理論知識扎實，具備良好的數據結構、算法功底，有一定獨立分析、技術研究能力；

　　7、良好的溝通能力、團隊合作精神、樂于；

　　8、具備較強的自學能力，有一點抗壓能力，能夠接受出差性質的.工作。

　　如有以下技術背景優先考慮：

　　1、有銀行業系統開發經驗；

　　2、參與過數倉項目開發、實施；

　　3、有數據治理項目經驗的。

　　etl工程師崗位職責 篇10

　　職責描述：

　　1、負責數據倉庫開發需求收集和分析；

　　2、負責數據模型體系構建及數據主題設計和開發；

　　3、負責數據抽取、清洗、轉化等數據處理程序開發；

　　4、負責對公司數據倉庫平臺整體架構改進與流程優化；

　　5、負責bi報表開發和優化。

　　任職資格：

　　1、2年以上數據倉庫工作經驗；

　　2、熟悉數據庫、etl、bi建模等工具；

　　3、良好編程習慣，以及較強的學習能力和溝通能力。

　　etl工程師崗位職責 篇11

　　崗位職責：

　　1、根據概要設計，進行詳細設計的'文檔編寫；

　　2、負責etl過程的設計/開發實施、單元測試；

　　3、負責項目中etl相關需求調研、源數據調研、整體設計；

　　4、負責項目中環境安裝及配置；

　　5、維護和升級現有etl任務和存儲過程，快速定位并修復現有系統缺陷。

　　職位要求：

　　1、大專及以上學歷，計算機相關專業，3年以上etl工作經驗。

　　2、熟悉etl開發流程，有hadoop和etl工作經驗；有從傳統數據庫抽取數據到hive數據倉庫經驗，了解sqoop應用原理者優先。

　　3、熟悉主流數據庫sqlserver、oracle、db2、mysql等；熟悉開源的etl工具。

　　4、有海量數據處理工作經驗，數據分析和挖掘經驗者優先；

　　5、做過數據倉庫、ods項目，對數據治理、數據標準及元數據有很好理念及實施經驗的優先；

　　6、熟練使用腳本語言：如perl、python、shell等任意一種以上；

　　7、熟悉linux系統指令和性能優化；

　　8、善于學習新技術，對新技術有較強的接受能力；工作認真細致，愿意于人交流溝通。

　　9、有大型數據倉庫系統研發、設計經驗者優先；

　　10、熟悉java語言或hadoop技術者優先；

　　崗位要求：

　　學歷要求：大專

　　語言要求：不限

　　年齡要求：不限

　　工作年限：3-4年經驗

　　etl工程師崗位職責 篇12

　　職位描述：

　　職責：

　　1、按業務分析需求進行建模；

　　2、進行數據倉庫需求分析、方案設計、etl裝載過程設計；

　　3、從業務數據庫到數據倉庫的etl開發；

　　4、結合業務流程和需求進行數據分析；

　　任職資格：

　　1、本科以上學歷，計算機等信息技術相關專業；

　　2、有互聯網金融相關工作經驗，了解相關數據流和業務背景優先；

　　3、兩年及以上數據倉庫相關工作經驗，對數據倉庫系統架構具有良好的認識，熟悉數據倉庫相關技術，如etl、報表開發，具備數據分析技術并具有相關項目經驗；

　　4、具有hive、spark、mysql、oracle等至少一種大型數據庫的應用開發經驗，熟悉數據標準管理、元數據管理、數據質量管理；

　　5、具備python統計和數據挖掘相關基本開發能力；

　　6、溝通能力好，善于規劃和總結，注重團隊合作及知識共享，能承擔一定的.工作壓力；

　　etl工程師崗位職責 篇13

　　1、5年以上做bi、數據倉庫etl開發方向,行業不限;

　　2、過去做北京汽車項目;

　　3、英語能基本讀寫;

　　4、開發經驗豐富,能迅速完成交辦相關工作;

　　5、溝通能力良好,具備團隊合作精神,能適應一定壓力開展工作。1年以上做bi、數據倉庫etl開發方向,行業不限;

　　2、過去做北京汽車項目;

　　3、英語能基本讀寫;

　　4、開發經驗豐富,能迅速完成交辦相關工作;

　　5、溝通能力良好,具備團隊合作精神,能適應一定壓力開展工作。

　　etl工程師崗位職責 篇14

　　職責描述:

　　1、負責大數據平臺的設計以及開發工作,維護升級等等;

　　2、負責離線/實時的數據存儲和加工處理,保證數據質量,負責數據監體系的建立和維護;

　　2、負責海量數據的清洗、處理和挖掘工作,支持數據分析師和算法工程師的'數據需求;

　　3、對數據敏感,基于海量數據進行業務分析,靈活運用可視化工具,參與產品與應用的數據研發,分析數據成因,發掘數據商業價值;

　　4、研究前沿技術,解決實際場景中的業務問題,優化離線/實時大數據計算任務的性能。

　　任職要求:

　　1、計算機或相關專業本科及以上學歷,3年以上大數據開發經驗;

　　2、熟悉linux/unix開發環境,精通python/java/scala/shell兩種以上;

　　3、熟悉常用開源分布式系統,對hadoop/hive/spark/storm/flink/hbase/kylin中的一項或多項有深入了解;,能夠獨立排查及解決分布式系統的問題;

　　4、良好的團隊精神和合作意識,強烈的責任心,對工作有激情,良好的溝通能力,能吃苦耐勞;

　　5、有2年以上的電商領域的優先。

　　etl工程師崗位職責 篇15

　　工作職責：

　　1、獨立完成產品的原型設計及最終視覺輸出（APP、WEB、WAP），把握視覺設計整體方向；

　　2、具有APP、WEB端設計經驗，持續優化界面，提出設計改善方案；

　　3、熟練使用Photoshop、Illustrator、CorelDRAW、Axure等必備專業軟件；

　　4、熟練Android和IOS的平臺特性及設計、開發適配工作；

　　5、能夠積極配合研發人員對頁面布局及樣式進行調整；

　　6、善于溝通，具備良好的'團隊合作精神，能夠承受較大的工作壓力；

　　7、了解Html、CSS+DIV、JavaScript等。

　　任職要求：

　　1、本科及以上學歷，美術、設計或相關專業（條件優秀者可放寬學歷及專業限制）

　　2、2年以上web或移動APP界面設計經驗，可以獨立完成整個設計過程

　　3、精通Photoshop、Illustrator、Dreamweaver等軟件，了解Justinmind、Axure等原型設計工具

　　4、熟悉windows、Android等平臺的界面設計規范，了解Html、CSS、Javascript等

　　5、具備良好的溝通交流、團隊協作能力，工作主動、富有激情和責任感，能承受工作壓力

　　6、有自己獨立完成設計作品或優秀的應用于主流網站的設計案例者優先

　　etl工程師崗位職責 篇16

　　工作職責：

　　1、負責公司相關產品移動端和PC端視覺設計，根據產品需求原型進行界面UI設計；

　　2、參與產品團隊設計討論，設定產品的整體視覺風格和UI設計，提出設計改善方案，配合程序開發人員完成項目；

　　3、參與產品前期界面UI研究、設計流行趨勢分析，并根據視覺設計的發展趨勢及用戶研究的結果優化產品的圖形界面（GUI）；

　　4、對現有產品的.可用性測試和評估，提出改進方案，不斷優化產品的圖形界面（GUI），優化需結合用戶體驗及完善設計流程。

　　任職資格：

　　1、美術設計及相關專業�？萍耙陨蠈W歷，有扎實的美術基本功，可獨立完成設計過程；

　　2、至少2年以上的移動端和PC端視覺設計工作經驗，熟悉Android、iOS設計規范；

　　3、精通用戶體驗設計流程和方法，熟悉產品界面的設計趨勢，對視覺設計、色彩有敏銳的觀察力及分析能力，具有較強的設計創新能力；

　　4、精通photoshop、illustrator等設計軟件；

　　5、對產品流程、用戶流程及用戶需求有一定理解，需要有良好的溝通能力和團隊合作協作精神；

　　6、投遞簡歷時，請在簡歷中附帶作品或作品鏈接。

　　etl工程師崗位職責 篇17

　　崗位職責：

　　1、在項目售前階段，與客戶溝通，了解客戶需求。制定機器視覺檢測方案。負責相機、光源、鏡頭等配件的選型。負責用戶來樣測試，出測試報告；

　　2、在項目設計階段，與機器視覺工程師、軟件工程師、電氣工程師等相關人員協同完成設備的詳細設計；

　　3、負責視覺算法的編寫和調試；

　　4、參與視覺設備的`現場調試；

　　5、維護公司樣本庫；

　　技術要求：

　　1、計算機、自動化、軟件、數學相關專業畢業；

　　2、3年以上機器視覺方案設計和算法開發經驗；

　　3、精通Halcon軟件，熟悉OpenCV；

　　4、有缺陷檢測、字符識別、光學測量，機器人引導等相關機器視覺項目經驗；

　　5、熟悉神經網絡、SVM、決策樹等機器學習算法；

　　6、具備初步的C#或C++編程能力；

　　7、能較熟練地使用AutoCAD或其他CAD軟件。

　　etl工程師崗位職責 篇18

　　崗位職責：

　　1、負責機器視覺系統方案制定，系統方案的試驗、選型、以及相關技術支持工作；

　　2、負責同行業產品的關鍵技術研發、系統實現和新的.技術路線調研；

　　3、與機械和電氣工程師合作，負責視覺系統中相機、鏡頭、光源的選型及方案優化；

　　4、參與視覺系統的安裝、調試，并協助整機聯調，反饋現場情況。

　　任職要求：

　　1、全日制本科及以上學歷，機電一體化/光學//自動化/精密測量及儀器/電子信息等相關專業；

　　2、熟悉光電儀器設計、光電檢測技術、光學信息處理等基礎知識，了解傳感器、相機、鏡頭、光源選型等。

　　3、要求有機器視覺系統搭建經驗，并且相關行業工作經驗1—3年。

　　4、有表面檢測系統研發經驗者優先；

　　5、有獨立設計開發過一套視覺系統者優先；

　　6、能夠適應短期出差。

　　etl工程師崗位職責 篇19

　　崗位職責：

　　1、參加現場裝飾工程的日常管理工作，協調工程的.現場配合；

　　2、參加裝飾工程材料設備選型、封樣及進場檢查驗收，對裝飾工程質量負責，對現場安全文明施工負責；

　　3、根據合同的約定、規程規范和設計圖紙的要求，嚴格監督裝飾工程項目施工質量，參加裝飾工程檢查驗收；

　　4、嚴格監督控制裝飾工程項目施工成本，對裝飾工程的隱蔽工程和其他形式的現場簽證嚴格監督；

　　5、根據上級計劃要求，負責管理施工現場計劃部署；檢查計劃執行情況，嚴格控制精裝工程施工進度并監督落實；實時上報現場實際進度，處理其他專業計劃變動對精裝計劃實施的影響；

　　6、負責解決變更及有關工程專業技術方面的問題；參加裝飾專業各階段工程驗收和竣工驗收并辦理相關手續；負責裝飾工程竣工驗收工作，做好工程交付工作。

　　任職要求：

　　1、本科及以上學歷，室內裝潢、藝術設計等相關專業；

　　2、8年以上工作經驗，其中有3年以上大型房地產公司相同崗位工作經驗；

　　3、熟練掌握專業相關軟件；

　　4、具有較強的方案設計能力及工地現場專業協調溝通能力。

　　etl工程師崗位職責 篇20

　　崗位職責：

　　1.負責公司IT運維，電腦及網絡故障解決。

　　2.對公司內部信息系統及設施進行日常檢查、監控和維護。

　　3.協助進行公司的信息化系統推進，ERP、OA、HR等信息化系統日常維護。

　　4.機房日常巡檢，服務器日常維護。

　　5.對公司員工各種信息系統及郵件賬戶密碼管理、權限分配管理。

　　6.完成上級領導交辦事宜。

　　任職要求：

　　1.計算機或網絡等相關專業，本科以上學歷，3年以上IT運維工作經驗。

　　2.熟悉和掌握各種計算機硬軟件，可獨立進行安裝、調試及故障排除。

　　3.了解ERP系統運行原理，有金蝶K3相關工作經驗優先。

　　4.熟悉SQL server、Oracle數據庫，有簡單的數據處理能力。

　　5.熟悉信息化系統維護工作。

　　6.善于溝通，有較強的'學習能力，執行力強。

　　7.有良好的服務意識，團隊合作觀念，高度的責任感。

　　8.工作細心，有獨立完成項目的能力。

　　9.每周需到母公司進行項目進度工作匯報。

【etl工程師崗位職責】相關文章：

etl崗位職責03-06

etl崗位職責15篇03-06

商場數據倉庫ETL系統架構設計05-09

工藝工程師工程師崗位職責12-21

IT工程師崗位職責06-04

工程師崗位職責07-21

it工程師崗位職責05-03

工程師崗位職責07-07

工程師的崗位職責01-04