資料倉庫工程師的具體職責文字

  資料倉庫工程師需要完善和梳理資料指標體系,完成和維護資料字典的工作。以下是小編整理的。

  1

  Responsibility

  1、負責建設資料倉庫架構,包括元資料管理、ETL排程、資料整合、OLAP等子系統的設計和開發;

  2、制定和推廣資料字典,建立完善的元資料管理規範,負責資料質量監控設計;

  3、搭建和維護資料倉庫表,解決業務人員在倉庫系統流程、工具使用、資料處理等遇到的問題;

  4、深入瞭解網易遊戲、CC直播、藏寶閣、網易大神等業務,負責資料倉庫和其它業務系統介面。

  5、基於對資料的理解和業務需求,對資料進行整理、分析和使用者畫像搭建。

  Requirements

  1、計算機相關專業本科及以上學歷,有2年以上資料倉庫、ETL工作經驗;

  2、熟悉SQL、Shell等相關技術,有海量資料處理、ETL及任務排程優化、資料倉庫建模等經驗;

  3、熟悉Linux環境,瞭解Java/Python服務端系統開發;

  4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大資料技術者優先;

  5、邏輯清晰、對資料敏感,良好的溝通能力和協作能力,敢於接受挑戰,能夠承受壓力;

  2

  職責:

  1、學習並理解勵步雲學***業務及系統,根據業務部門需求對公司各項業務資料進行統計分析,出具相關報表;

  2、進行資料倉庫設計、模型開發、資料質量校驗,報表開發;

  3、進行資料差異分析,找出統計口徑、資料錯誤、操作錯誤等造成的差異原因;

  4、進行資料查詢優化,解決跑數效能問題。

  任職資格:

  1、本科以上學歷,數學、統計、計算機相關專業優先;

  2、3年以上網際網路相關行業資料開發經驗;

  3、精通資料倉庫建設思路,並有相關實施經驗,特別是通用匯總層建設經驗;

  4、較強的資料開發能力,熟悉Hadoop相關技術,深刻理解MapReduce原理和過程;

  5、精通Hive SQL,進行資料處理及模型開發;

  6、有較強的學習能力,能快速學習和理解業務知識及資料需求;

  3

  職責:

  1、負責資料倉庫***HADOOP***ETL工作以及資料運營;

  2、負責資料產品的業務需求梳理、資料開發以及維護;

  3、負責資料倉庫的維度建模以及設計相關的指令碼排程;

  4、負責維度模型的資料處理的指令碼開發,程式開發以及介面對接。

  職位要求:

  1. 本科以上學歷,資訊管理、計算機相關專業,兩年以上ETL、資料倉庫和大資料相關經驗;

  2. 熟悉資料倉庫架構,瞭解HADOOP等大資料平臺;

  3. 有ORACLE\DB2等大型的資料倉庫的開發經驗;

  4. 能夠用HIVE的SQL,HADOOP的MAPREDUCE和SPARK去處理資料;

  5. 熟悉關係資料庫,並有HIVE的SQL的開發經驗;

  6. 熟悉Linux的shell程式設計;

  7. 有銀行和運營商相關的大資料或者資料倉庫相關經驗的優先

  8. 熱愛技術工作,具有較強的團隊協作意識,資料安全意識;

  9. 工作嚴謹、責任心強,能承受工作壓力。

  4

  職責:

  1、負責大資料平臺搭建及資料倉庫建模;

  2、負責資料庫管理及資料優化;

  3、利用大資料相關技術實現對資料的分析、挖掘、處理、及資料視覺化等相關工作;

  4、維護大資料平臺並能解決相關問題, 保障平臺正常執行;

  5、學習和研究新技術以滿足系統需求。

  任職資格:

  1、本科及以上學歷,計算機、通訊等相關專業;

  2、有相關工作經驗者優先;

  3、對網際網路產品有見解,關注前沿技術,有較強的學習能力、分析能力和動手能力;

  4、熟悉Linux作業系統及ORACLE、MySQL及MongoDB等資料庫,瞭解SQL優化,熟悉ER模型和相關資料建模技術,能夠熟練使用Java或Python、SHELL;

  5、熟悉Hadoop的體系架構和執行原理,有大資料處理方面經驗

  6、具有大型資料倉庫和ETL開發、HIVE經驗優先

  7、個性樂觀開朗,溝通能力強,具備良好的團隊協作精神,能利用自身技術能力提升團隊整體研發效率。

  5

  職責:

  1、參與資料倉庫建設,負責資料倉庫模型設計;

  2、開發高質量可擴充套件的底層資料倉庫體系;

  3、負責資料倉庫系統與業務系統的介面設計和確認工作;

  4、負責資料平臺相關的管理工作,如資料研發規範、資料質量及穩定性保證等建設;

  5、參與公司各個業務線BI、資料產品與應用的資料研發,發覺資料潛在價值。

  崗位要求:

  1.大學本科及以上學歷,計算機、經濟、金融、數學專業背景,有3年以上工作經驗;

  2.熟悉資料倉庫建模理論,以及數倉資料層級關係,具備大型數倉邏輯模型和物理模型設計經驗;

  3.熟悉一種ETL開發工具***sqoop,datax等***, 熟悉ETL開發實施流程和原理;

  4.掌握CDH版的hadoop環境,掌握hiveQL,有調優經驗;

  5.有一定的程式語言基礎,不限制於java,python,shell等;

  6.有元資料管理、資料質量管理工作經驗的優先考慮;

  7.工作認真,負責,仔細,有良好的團隊合作精神。