學習啦 > 實用范文 > 辦公文秘 > 崗位職責 > 數(shù)據(jù)倉庫工程師的具體職責文本

數(shù)據(jù)倉庫工程師的具體職責文本

時間: 舒欣1213 分享

數(shù)據(jù)倉庫工程師的具體職責文本

  數(shù)據(jù)倉庫工程師需要完善和梳理數(shù)據(jù)指標體系,完成和維護數(shù)據(jù)字典的工作。以下是學習啦小編整理的數(shù)據(jù)倉庫工程師的具體職責文本。

  數(shù)據(jù)倉庫工程師的具體職責文本1

  Responsibility

  1、負責建設數(shù)據(jù)倉庫架構,包括元數(shù)據(jù)管理、ETL調度、數(shù)據(jù)集成、OLAP等子系統(tǒng)的設計和開發(fā);

  2、制定和推廣數(shù)據(jù)字典,建立完善的元數(shù)據(jù)管理規(guī)范,負責數(shù)據(jù)質量監(jiān)控設計;

  3、搭建和維護數(shù)據(jù)倉庫表,解決業(yè)務人員在倉庫系統(tǒng)流程、工具使用、數(shù)據(jù)處理等遇到的問題;

  4、深入了解網(wǎng)易游戲、CC直播、藏寶閣、網(wǎng)易大神等業(yè)務,負責數(shù)據(jù)倉庫和其它業(yè)務系統(tǒng)接口。

  5、基于對數(shù)據(jù)的理解和業(yè)務需求,對數(shù)據(jù)進行整理、分析和用戶畫像搭建。

  Requirements

  1、計算機相關專業(yè)本科及以上學歷,有2年以上數(shù)據(jù)倉庫、ETL工作經(jīng)驗;

  2、熟悉SQL、Shell等相關技術,有海量數(shù)據(jù)處理、ETL及任務調度優(yōu)化、數(shù)據(jù)倉庫建模等經(jīng)驗;

  3、熟悉Linux環(huán)境,了解Java/Python服務端系統(tǒng)開發(fā);

  4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大數(shù)據(jù)技術者優(yōu)先;

  5、邏輯清晰、對數(shù)據(jù)敏感,良好的溝通能力和協(xié)作能力,敢于接受挑戰(zhàn),能夠承受壓力;

  數(shù)據(jù)倉庫工程師的具體職責文本2

  職責:

  1、學習并理解勵步云學***業(yè)務及系統(tǒng),根據(jù)業(yè)務部門需求對公司各項業(yè)務數(shù)據(jù)進行統(tǒng)計分析,出具相關報表;

  2、進行數(shù)據(jù)倉庫設計、模型開發(fā)、數(shù)據(jù)質量校驗,報表開發(fā);

  3、進行數(shù)據(jù)差異分析,找出統(tǒng)計口徑、數(shù)據(jù)錯誤、操作錯誤等造成的差異原因;

  4、進行數(shù)據(jù)查詢優(yōu)化,解決跑數(shù)性能問題。

  任職資格:

  1、本科以上學歷,數(shù)學、統(tǒng)計、計算機相關專業(yè)優(yōu)先;

  2、3年以上互聯(lián)網(wǎng)相關行業(yè)數(shù)據(jù)開發(fā)經(jīng)驗;

  3、精通數(shù)據(jù)倉庫建設思路,并有相關實施經(jīng)驗,特別是通用匯總層建設經(jīng)驗;

  4、較強的數(shù)據(jù)開發(fā)能力,熟悉Hadoop相關技術,深刻理解MapReduce原理和過程;

  5、精通Hive SQL,進行數(shù)據(jù)處理及模型開發(fā);

  6、有較強的學習能力,能快速學習和理解業(yè)務知識及數(shù)據(jù)需求;

  數(shù)據(jù)倉庫工程師的具體職責文本3

  職責:

  1、負責數(shù)據(jù)倉庫(HADOOP)ETL工作以及數(shù)據(jù)運營;

  2、負責數(shù)據(jù)產品的業(yè)務需求梳理、數(shù)據(jù)開發(fā)以及維護;

  3、負責數(shù)據(jù)倉庫的維度建模以及設計相關的腳本調度;

  4、負責維度模型的數(shù)據(jù)處理的腳本開發(fā),程序開發(fā)以及接口對接。

  職位要求:

  1. 本科以上學歷,信息管理、計算機相關專業(yè),兩年以上ETL、數(shù)據(jù)倉庫和大數(shù)據(jù)相關經(jīng)驗;

  2. 熟悉數(shù)據(jù)倉庫架構,了解HADOOP等大數(shù)據(jù)平臺;

  3. 有ORACLE\DB2等大型的數(shù)據(jù)倉庫的開發(fā)經(jīng)驗;

  4. 能夠用HIVE的SQL,HADOOP的MAPREDUCE和SPARK去處理數(shù)據(jù);

  5. 熟悉關系數(shù)據(jù)庫,并有HIVE的SQL的開發(fā)經(jīng)驗;

  6. 熟悉Linux的shell編程;

  7. 有銀行和運營商相關的大數(shù)據(jù)或者數(shù)據(jù)倉庫相關經(jīng)驗的優(yōu)先

  8. 熱愛技術工作,具有較強的團隊協(xié)作意識,數(shù)據(jù)安全意識;

  9. 工作嚴謹、責任心強,能承受工作壓力。

  數(shù)據(jù)倉庫工程師的具體職責文本4

  職責:

  1、負責大數(shù)據(jù)平臺搭建及數(shù)據(jù)倉庫建模;

  2、負責數(shù)據(jù)庫管理及數(shù)據(jù)優(yōu)化;

  3、利用大數(shù)據(jù)相關技術實現(xiàn)對數(shù)據(jù)的分析、挖掘、處理、及數(shù)據(jù)可視化等相關工作;

  4、維護大數(shù)據(jù)平臺并能解決相關問題, 保障平臺正常運行;

  5、學習和研究新技術以滿足系統(tǒng)需求。

  任職資格:

  1、本科及以上學歷,計算機、通信等相關專業(yè);

  2、有相關工作經(jīng)驗者優(yōu)先;

  3、對互聯(lián)網(wǎng)產品有見解,關注前沿技術,有較強的學習能力、分析能力和動手能力;

  4、熟悉Linux操作系統(tǒng)及ORACLE、MySQL及MongoDB等數(shù)據(jù)庫,了解SQL優(yōu)化,熟悉ER模型和相關數(shù)據(jù)建模技術,能夠熟練使用Java或Python、SHELL;

  5、熟悉Hadoop的體系架構和運行原理,有大數(shù)據(jù)處理方面經(jīng)驗

  6、具有大型數(shù)據(jù)倉庫和ETL開發(fā)、HIVE經(jīng)驗優(yōu)先

  7、個性樂觀開朗,溝通能力強,具備良好的團隊協(xié)作精神,能利用自身技術能力提升團隊整體研發(fā)效率。

  數(shù)據(jù)倉庫工程師的具體職責文本5

  職責:

  1、參與數(shù)據(jù)倉庫建設,負責數(shù)據(jù)倉庫模型設計;

  2、開發(fā)高質量可擴展的底層數(shù)據(jù)倉庫體系;

  3、負責數(shù)據(jù)倉庫系統(tǒng)與業(yè)務系統(tǒng)的接口設計和確認工作;

  4、負責數(shù)據(jù)平臺相關的管理工作,如數(shù)據(jù)研發(fā)規(guī)范、數(shù)據(jù)質量及穩(wěn)定性保證等建設;

  5、參與公司各個業(yè)務線BI、數(shù)據(jù)產品與應用的數(shù)據(jù)研發(fā),發(fā)覺數(shù)據(jù)潛在價值。

  崗位要求:

  1.大學本科及以上學歷,計算機、經(jīng)濟、金融、數(shù)學專業(yè)背景,有3年以上工作經(jīng)驗;

  2.熟悉數(shù)據(jù)倉庫建模理論,以及數(shù)倉數(shù)據(jù)層級關系,具備大型數(shù)倉邏輯模型和物理模型設計經(jīng)驗;

  3.熟悉一種ETL開發(fā)工具(sqoop,datax等), 熟悉ETL開發(fā)實施流程和原理;

  4.掌握CDH版的hadoop環(huán)境,掌握hiveQL,有調優(yōu)經(jīng)驗;

  5.有一定的編程語言基礎,不限制于java,python,shell等;

  6.有元數(shù)據(jù)管理、數(shù)據(jù)質量管理工作經(jīng)驗的優(yōu)先考慮;

  7.工作認真,負責,仔細,有良好的團隊合作精神。

相關文章:

1.數(shù)據(jù)倉庫工程師的崗位職責表述

2.數(shù)據(jù)倉庫工程師的工作職責

3.數(shù)據(jù)倉庫工程師的基本職責模板

4.數(shù)據(jù)挖掘工程師工作的崗位職責模板

5.數(shù)據(jù)挖掘工程師工作的職責概述

88873