大数据开发(数据仓库)职位描述与岗位职责任职要求 - 制度大全
制度大全 导航

大数据开发(数据仓库)职位描述与岗位职责任职要求

编辑:制度大全2020-07-29

职位描述

岗位职责

1、参与计算框架和服务的定制和改进,为公司批处理和流式计算能力提供支撑

2、基于业务需求和应用场景,设计和实现公司大数据相关产品

3、负责设计,开发,优化数据接入、数据存储、数据计算服务框架

4、为公司所有业务线提供数据支持和服务

任职要求

1、本科以上学历,3年以上大数据开发经验,掌握数据仓库理论、模型设计方法、ETL设计理论等

2、对大数据离线数仓有成熟的解决方案和实践经验

3、深入理解公司业务,建立指标分析体系,利用数据分析,不断驱动业务优化,策略分析经验丰富优先

4、了解SQL,HiveSQL,SparkSQL优先,熟悉Python编程,Java基础编程

5、有较强的性能优化及问题排查、解决能力

6、具备良好的沟通能力,做事认真、仔细,有责任心,具有团队协作能力

篇2:高级数据仓库工程师职位描述与岗位职责任职要求

职位描述

职责描述

1、规划业务主题模型,与业务沟通并管理数据需求;

2、数据仓库和数据集市建设,数据模型设计和推进开发;

3、负责数据治理,梳理工作流程和方法,保证口径统一、指标规范、数据准确;

4、培养团队数仓能力

任职要求

1、有至少3年数据仓库实施及至少2年模型设计经验,本科以上学历;

2、深入理解DW,BI相关的知识,包括:ETL、数据仓库、OLAP、3NF和多维数据模型设计等;

3、熟悉数据仓库建模理论,以及数据仓库数据层级关系,精通多维数据模型设计,具备大型数据仓库架构设计、模型设计和处理性能调优等相关经验;

4、熟练使用主流数据模型设计工具。精通SQL,能够熟练使用HiveQL和SparkSQL进行数据开发,熟悉Hive数据模型优化;

5、熟悉DB2、Oracle、Teradata、Greenplum等主流数据仓库模型设计之一

6、熟悉Hadoop、Hive,具备海量数据处理和性能调优经验,对Hadoop、Hive源码有研究更佳

7、学习能力强,优秀的逻辑思维能力和业务需求分析能力,较好的沟通交流能力,能够迅速融入团队

篇3:数据仓库高级工程师职位描述与岗位职责任职要求

职位描述

工作职责

1、负责今日头条的用户产品线的数据仓库架构设计、建模和ETL开发;

2、参与数据治理工作,提升数据易用性及数据质量,与数据工具团队紧密合作;

3、理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作。

任职要求

1、精通数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景;

2、具备较强的编码能力,熟悉sql,python,hive,spark,kafka,storm中的多项,有至少TB以上级大数据处理经验;

3、对数据敏感,认真细致,善于从数据中发现疑点;

4、善于沟通,具备优秀的技术与业务结合能力。

篇4:数据仓库开发工程师Lark职位描述与岗位职责任职要求

职位描述

工作职责

1、负责创新工具核心业务模块数据仓库的构建;

2、负责数据模型的设计,ETL实施、ETL性能优化、ETL数据监控以及一系列技术问题的解决;

3、负责构建用户主题、各业务线主题、推荐主题、企业BI门户系统;

4、负责全产品线数据字典维护,提升数据资产质量。

任职要求

1、计算机、数学相关专业本科及以上学历,三年以上大数据开发工作经验,数据挖掘和BI分析领域优先;

2、熟练掌握Hive/SQL,熟悉Spark/Map-Reduce/MPI分布式计算框架,熟悉大数据的离线和实时处理,可以进行海量数据模型的设计、开发;

3、有产品sense,主动思考基于业务场景下的数据体系建设;

4、工作认真,负责,良好的团队合作精神和解决问题分析能力。钻研技术克服困难,勇于挑战;

5、有数据分析经验优先。

篇5:广告数据仓库工程师职位描述与岗位职责任职要求

职位描述

工作职责

1、广告业务数据仓库建设和管理,包括但不限于数据质量、数据模型、数据安全相关标准的制定;

2、负责与业务团队协同规划与设计数据仓库模型,并快速实现;

3、参与数据治理工作,提升数据易用性及数据质量;

4、参与大数据应用规划、为数据挖据、应用团队提供应用指导。

任职要求

1、本科以上学历,2年以上互联网业务数据仓库模型设计、开发经验;

2、熟练使用Hadoop及Hive,熟悉HQL、Java、Python等编程语言;

3、具有web开发经验者优先;

4、有ElasticSearch、Druid、HBase使用经验者优先。

制度专栏

返回顶部
触屏版电脑版

© 制度大全 qiquha.com版权所有