DW数据仓库ETL工程师职位描述与岗位职责任职要求 - 制度大全
制度大全 导航

DW数据仓库ETL工程师职位描述与岗位职责任职要求

编辑:制度大全2020-07-30

职位描述

职责描述

1.负责数据仓库开发需求收集和分析;

2.负责数据模型体系构建及数据主题设计和开发;

3.负责数据抽取、清洗、转化等数据处理程序开发;

4.负责对公司数据仓库平台整体架构改进与流程优化;

5.负责BI报表开发和优化。

任职资格

1.2年以上数据仓库工作经验;

2.熟悉数据库、ETL、BI建模等工具;

3.良好编程习惯,以及较强的学习能力和沟通能力。

篇2:高级数据仓库工程师职位描述与岗位职责任职要求

职位描述

职责描述

1、规划业务主题模型,与业务沟通并管理数据需求;

2、数据仓库和数据集市建设,数据模型设计和推进开发;

3、负责数据治理,梳理工作流程和方法,保证口径统一、指标规范、数据准确;

4、培养团队数仓能力

任职要求

1、有至少3年数据仓库实施及至少2年模型设计经验,本科以上学历;

2、深入理解DW,BI相关的知识,包括:ETL、数据仓库、OLAP、3NF和多维数据模型设计等;

3、熟悉数据仓库建模理论,以及数据仓库数据层级关系,精通多维数据模型设计,具备大型数据仓库架构设计、模型设计和处理性能调优等相关经验;

4、熟练使用主流数据模型设计工具。精通SQL,能够熟练使用HiveQL和SparkSQL进行数据开发,熟悉Hive数据模型优化;

5、熟悉DB2、Oracle、Teradata、Greenplum等主流数据仓库模型设计之一

6、熟悉Hadoop、Hive,具备海量数据处理和性能调优经验,对Hadoop、Hive源码有研究更佳

7、学习能力强,优秀的逻辑思维能力和业务需求分析能力,较好的沟通交流能力,能够迅速融入团队

篇3:数据仓库高级工程师职位描述与岗位职责任职要求

职位描述

工作职责

1、负责今日头条的用户产品线的数据仓库架构设计、建模和ETL开发;

2、参与数据治理工作,提升数据易用性及数据质量,与数据工具团队紧密合作;

3、理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作。

任职要求

1、精通数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景;

2、具备较强的编码能力,熟悉sql,python,hive,spark,kafka,storm中的多项,有至少TB以上级大数据处理经验;

3、对数据敏感,认真细致,善于从数据中发现疑点;

4、善于沟通,具备优秀的技术与业务结合能力。

篇4:数据仓库开发工程师Lark职位描述与岗位职责任职要求

职位描述

工作职责

1、负责创新工具核心业务模块数据仓库的构建;

2、负责数据模型的设计,ETL实施、ETL性能优化、ETL数据监控以及一系列技术问题的解决;

3、负责构建用户主题、各业务线主题、推荐主题、企业BI门户系统;

4、负责全产品线数据字典维护,提升数据资产质量。

任职要求

1、计算机、数学相关专业本科及以上学历,三年以上大数据开发工作经验,数据挖掘和BI分析领域优先;

2、熟练掌握Hive/SQL,熟悉Spark/Map-Reduce/MPI分布式计算框架,熟悉大数据的离线和实时处理,可以进行海量数据模型的设计、开发;

3、有产品sense,主动思考基于业务场景下的数据体系建设;

4、工作认真,负责,良好的团队合作精神和解决问题分析能力。钻研技术克服困难,勇于挑战;

5、有数据分析经验优先。

篇5:广告数据仓库工程师职位描述与岗位职责任职要求

职位描述

工作职责

1、广告业务数据仓库建设和管理,包括但不限于数据质量、数据模型、数据安全相关标准的制定;

2、负责与业务团队协同规划与设计数据仓库模型,并快速实现;

3、参与数据治理工作,提升数据易用性及数据质量;

4、参与大数据应用规划、为数据挖据、应用团队提供应用指导。

任职要求

1、本科以上学历,2年以上互联网业务数据仓库模型设计、开发经验;

2、熟练使用Hadoop及Hive,熟悉HQL、Java、Python等编程语言;

3、具有web开发经验者优先;

4、有ElasticSearch、Druid、HBase使用经验者优先。

制度专栏

返回顶部
触屏版电脑版

© 制度大全 qiquha.com版权所有