学习啦>实用范文>办公文秘>岗位职责>

数据仓库工程师的具体职责文本

舒欣分享

  数据仓库工程师需要完善和梳理数据指标体系,完成和维护数据字典的工作。以下是学习啦小编整理的数据仓库工程师的具体职责文本。

  数据仓库工程师的具体职责文本1

  Responsibility

  1、负责建设数据仓库架构,包括元数据管理、ETL调度、数据集成、OLAP等子系统的设计和开发;

  2、制定和推广数据字典,建立完善的元数据管理规范,负责数据质量监控设计;

  3、搭建和维护数据仓库表,解决业务人员在仓库系统流程、工具使用、数据处理等遇到的问题;

  4、深入了解网易游戏、CC直播、藏宝阁、网易大神等业务,负责数据仓库和其它业务系统接口。

  5、基于对数据的理解和业务需求,对数据进行整理、分析和用户画像搭建。

  Requirements

  1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作经验;

  2、熟悉SQL、Shell等相关技术,有海量数据处理、ETL及任务调度优化、数据仓库建模等经验;

  3、熟悉Linux环境,了解Java/Python服务端系统开发;

  4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大数据技术者优先;

  5、逻辑清晰、对数据敏感,良好的沟通能力和协作能力,敢于接受挑战,能够承受压力;

  数据仓库工程师的具体职责文本2

  职责:

  1、学习并理解励步云学***业务及系统,根据业务部门需求对公司各项业务数据进行统计分析,出具相关报表;

  2、进行数据仓库设计、模型开发、数据质量校验,报表开发;

  3、进行数据差异分析,找出统计口径、数据错误、操作错误等造成的差异原因;

  4、进行数据查询优化,解决跑数性能问题。

  任职资格:

  1、本科以上学历,数学、统计、计算机相关专业优先;

  2、3年以上互联网相关行业数据开发经验;

  3、精通数据仓库建设思路,并有相关实施经验,特别是通用汇总层建设经验;

  4、较强的数据开发能力,熟悉Hadoop相关技术,深刻理解MapReduce原理和过程;

  5、精通Hive SQL,进行数据处理及模型开发;

  6、有较强的学习能力,能快速学习和理解业务知识及数据需求;

  数据仓库工程师的具体职责文本3

  职责:

  1、负责数据仓库(HADOOP)ETL工作以及数据运营;

  2、负责数据产品的业务需求梳理、数据开发以及维护;

  3、负责数据仓库的维度建模以及设计相关的脚本调度;

  4、负责维度模型的数据处理的脚本开发,程序开发以及接口对接。

  职位要求:

  1. 本科以上学历,信息管理、计算机相关专业,两年以上ETL、数据仓库和大数据相关经验;

  2. 熟悉数据仓库架构,了解HADOOP等大数据平台;

  3. 有ORACLE\DB2等大型的数据仓库的开发经验;

  4. 能够用HIVE的SQL,HADOOP的MAPREDUCE和SPARK去处理数据;

  5. 熟悉关系数据库,并有HIVE的SQL的开发经验;

  6. 熟悉Linux的shell编程;

  7. 有银行和运营商相关的大数据或者数据仓库相关经验的优先

  8. 热爱技术工作,具有较强的团队协作意识,数据安全意识;

  9. 工作严谨、责任心强,能承受工作压力。

  数据仓库工程师的具体职责文本4

  职责:

  1、负责大数据平台搭建及数据仓库建模;

  2、负责数据库管理及数据优化;

  3、利用大数据相关技术实现对数据的分析、挖掘、处理、及数据可视化等相关工作;

  4、维护大数据平台并能解决相关问题, 保障平台正常运行;

  5、学习和研究新技术以满足系统需求。

  任职资格:

  1、本科及以上学历,计算机、通信等相关专业;

  2、有相关工作经验者优先;

  3、对互联网产品有见解,关注前沿技术,有较强的学习能力、分析能力和动手能力;

  4、熟悉Linux操作系统及ORACLE、MySQL及MongoDB等数据库,了解SQL优化,熟悉ER模型和相关数据建模技术,能够熟练使用Java或Python、SHELL;

  5、熟悉Hadoop的体系架构和运行原理,有大数据处理方面经验

  6、具有大型数据仓库和ETL开发、HIVE经验优先

  7、个性乐观开朗,沟通能力强,具备良好的团队协作精神,能利用自身技术能力提升团队整体研发效率。

  数据仓库工程师的具体职责文本5

  职责:

  1、参与数据仓库建设,负责数据仓库模型设计;

  2、开发高质量可扩展的底层数据仓库体系;

  3、负责数据仓库系统与业务系统的接口设计和确认工作;

  4、负责数据平台相关的管理工作,如数据研发规范、数据质量及稳定性保证等建设;

  5、参与公司各个业务线BI、数据产品与应用的数据研发,发觉数据潜在价值。

  岗位要求:

  1.大学本科及以上学历,计算机、经济、金融、数学专业背景,有3年以上工作经验;

  2.熟悉数据仓库建模理论,以及数仓数据层级关系,具备大型数仓逻辑模型和物理模型设计经验;

  3.熟悉一种ETL开发工具(sqoop,datax等), 熟悉ETL开发实施流程和原理;

  4.掌握CDH版的hadoop环境,掌握hiveQL,有调优经验;

  5.有一定的编程语言基础,不限制于java,python,shell等;

  6.有元数据管理、数据质量管理工作经验的优先考虑;

  7.工作认真,负责,仔细,有良好的团队合作精神。

相关文章:

1.数据仓库工程师的岗位职责表述

2.数据仓库工程师的工作职责

3.数据仓库工程师的基本职责模板

4.数据挖掘工程师工作的岗位职责模板

5.数据挖掘工程师工作的职责概述

    88873