數據倉庫工程師的崗位職責表述
數據倉庫工程師的崗位職責表述
數據倉庫工程師負責大數據應用類項目的設計和交付,能獨立和客戶對接業(yè)務,并編寫需求文檔、模型設計文檔。以下是學習啦小編整理的數據倉庫工程師的崗位職責表述。
數據倉庫工程師的崗位職責表述1
職責:
1. 利用數據倉庫建模及相關技術,參與數據倉庫模型的設計。
2. 參與企業(yè)級大數據倉庫項目的落地開發(fā)。
3. 參與企業(yè)級主數據管理項目的實施落地。
4. 利用hadoop生態(tài)相關技術,負責大數據中心的數據處理流程,包括數據清洗、融合、統(tǒng)計、挖掘等。
任職要求
1. 熟悉數據倉庫產品,對數據處理、維度建模、數據分析等有深刻認識,具備數據倉庫架構設計、模型設計、ETL設計的相關經驗、熟悉數據倉庫架構,熟悉數據倉庫項目的實施流程,有一個以上企業(yè)級數據倉庫項目設計經驗者優(yōu)先;
2. 熟悉數據治理及主數據管理的理論知識,掌握主數據管理項目的實施方法和落地過程,至少參與過一個主數據管理項目的實施落地。
3. 精通JAVA、Python等編程語言;精通Oracle、Mysql等主流數據庫,精通SQL;
4. 具備基于Hadoop大數據平臺開發(fā)經驗,熟悉hadoop生態(tài)體系,熟悉Hadoop、Hbase、Hive,Spark,Impala等常用組件,進行常用的ETL開發(fā)工作;
5. 熟悉常用的數據分析及數據挖掘方法及實現;
6. 具備較強的代碼能力,有較強的數據分析能力;具備優(yōu)秀的溝通能力、學習能力;
7. 相關專業(yè)碩士以上學歷,或本科學歷相關工作經驗超過2年,具有智能制造領域相關經驗或背景者優(yōu)先,能力突出者可適當放寬要求。
數據倉庫工程師的崗位職責表述2
職責:
1、負責制定數據倉庫平臺技術體系架構、數據架構及規(guī)范;
2、負責設計和實施公司業(yè)務數據的實時/離線數據ETL架構方案;
3、負責調度架構設計與開發(fā);
4、負責數據倉庫平臺運維以及日常數據運營等管理;
5、負責關鍵技術攻關;
崗位要求:
1、計算機、數學、統(tǒng)計等相關專業(yè)本科及以上學歷,3年以上數據倉庫項目開發(fā)經驗,參與過數據倉庫架構設計,對ETL開發(fā)流程、調度架構有深入理解;
2、精通mysql等數據庫,豐富的SQL性能調優(yōu)經驗;
3、熟練使用Java、Shell等腳本語言;
4、熟悉數據治理理論,數據質量、元數據管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技術及其生態(tài)圈;
6、溝通能力好、責任心強,具有良好的團隊合作精神和敬業(yè)精神;
數據倉庫工程師的崗位職責表述3
職責:
1、負責建設數據倉庫架構,包括元數據管理、ETL調度、數據集成、OLAP等子系統(tǒng)的設計和開發(fā);
2、搭建和維護數據倉庫表,解決業(yè)務人員在倉庫系統(tǒng)流程、工具使用、數據處理等遇到的問題;
3、基于對數據的理解和業(yè)務需求,對數據進行整理、分析和挖掘。
任職資格:
1、做事耐心,有強烈的責任心;
2、計算機,數學,統(tǒng)計學相關專業(yè)本科及以上學歷,
3、熟悉主流的關系型數據庫及MPP數據庫,至少精通一門數據庫,熟悉Gbase優(yōu)先;
4、熟練使用SQL語言,具有2年及以上數據倉庫、報表系統(tǒng)等ETL開發(fā)、維護經驗;
5、熟悉Hadoop/Spark/Hive/Hbase等大數據技術者優(yōu)先;
6、邏輯清晰、對數據敏感,良好的溝通能力和協(xié)作能力,敢于接受挑戰(zhàn),能夠承受壓力;
7、有公安相關業(yè)務經驗者優(yōu)先考慮。
數據倉庫工程師的崗位職責表述4
職責:
1.負責業(yè)務的數倉\數據集市的建設,能提煉通用需求,數倉標準,實現高質量的數據互通共享
2.對海量數據進行統(tǒng)計與分析,產品效果評估與分析,為產品策略優(yōu)化迭代提供強有力的數據支持
3.和業(yè)務團隊緊密合作推動數據產品與服務的落地,具備良好的溝通協(xié)調能力
任職要求:
1.計算機 數學 統(tǒng)計, 金融等相關專業(yè)的本科或以上學歷;從事數倉領域至少3年以上,具備海量數據的DW模型設計與ETL開發(fā)經驗 2.熟悉數倉領域知識, 包括但不局限于:數據質量,元數據管理,主數據管理,數據開發(fā)測試工具與方法;
3.掌握Greenplum,Oracle,Teradata,Mysql 等至少一種,靈活運用SQL實現海量數據ETL加工處理;有Greenplum經驗優(yōu)先
4.具有數據倉庫相關開發(fā)經驗,如ETL,建模,BI,數據產品等,熟悉數倉模型
5.掌握一門或多門開發(fā)語言,不限于java/python/scala等,熟悉Linux/Unix 平臺上的開發(fā)環(huán)境
6、主導過大型數據倉庫架構或模型設計經驗者優(yōu)先;
7、較好的溝通理解能力,性格樂觀,態(tài)度踏實,積極上進;
數據倉庫工程師的崗位職責表述5
職責:
1. 負責數據ETL開發(fā),根據數倉層級結構及主題域劃分,規(guī)范清洗代碼,提供準確數據
2. 負責數據質量治理,發(fā)現異常業(yè)務邏輯或數據質量問題,推動業(yè)務優(yōu)化及改善。
3. 負責數據開發(fā)需求評審、結合數據分析體系制定ETL清洗方案;
任職要求:
1. 一年以上數據倉庫ETL設計及開發(fā)經驗,有BI經驗者優(yōu)先
2. 熟練使用 SQL,熟悉HQL常用內部函數,有一定的 HQL性能調優(yōu)經驗優(yōu)先
3. 具備數據倉庫架構設計、模型設計、ETL設計,調度的相關經驗優(yōu)先;
4. 對數據敏感,有較強數據分析和解決問題能力;
5. 積極溝通,主動了解業(yè)務需求,愿意嘗試新的技術領域。
相關文章: