数据开发高级工程师职位描述与岗位职责任职要求 - 制度大全
制度大全 导航

数据开发高级工程师职位描述与岗位职责任职要求

编辑:制度大全2020-07-21

职位描述

工作职责

1、负责数据收集、清洗和规约等工作;

2、提供面向业务的数据服务,完成数据指标的统计、多维分析和展现;

3、根据业务和产品情况,抽象业务逻辑,搭建和开发大数据平台。

任职要求

1、统招本科或以上学历;

2、精通SQL,有较好的SQL性能调优经验,了解Hive/MySQL的基本原理和调优策略

3、熟悉常用的数据挖掘、分析的工具和方法,熟悉linux平台,精通Shell/Python/PHP等脚本语言的一种或多种,编码基本功扎实;

4、精通Java开发,熟悉大数据处理相关技术,有Hadoop开发经验,掌握MapReduce。

篇2:中级大数据开发工程师职位描述与岗位职责任职要求

职位描述

职责描述

1、参与公司商业智能平台的研发工作;

2、参与公司商业智能平台的升级改造工作,包括运维工作。

任职要求

1、正规院校本科及以上学历,软件、计算机、通信、信息安全、网络工程等相关专业;

2、良好的Java开发背景,熟悉Spring/MyBatis技术体系;

3、良好的SQL功底,熟悉MySQL或Oracle数据库;

4、熟悉Linux;

5、了解开源Pentaho产品,包括PRD、Mondrian、SaiKu、Kettle等;

6、熟悉Hadoop、Hive、HBase、Storm、Spark等大数据平台;

7、沟通能力强,有较强的学习能力,有较强的责任心与良好的团队协作能力。

篇3:高级大数据开发工程师职位描述与岗位职责任职要求

职位描述

岗位职责

1.基于公司大数据产品进行数据开发,包括数据的采集,清洗,预处理,存储,建模,分析挖掘等

2.根据业务用户需要分析数据,提供数据支持

3.参与公司大数据产品的运维和监控,保障数据质量和服务稳定性

任职要求

1.具备本科以上学历,计算机,软件以及相关专业,5年以上大数据开发经验

2.熟悉数据仓库维度建模,并能根据客户需求进行数据开发,向模型更新数据

3.使用过至少一种以上的ETL工具

4.熟练掌握Java,对Hadoop相关的技术和组件(HDFS,MR,Hbase,Hive,Spark,Storm,Kafka等)有全面深入了解

5.熟练掌握Shell或者Python中的一种

6.具备Spark开发经验者优先

7.具备实时计算(Kafka+Storm/SparkStreaming)经验者优先

8.具备数据分析和数据挖掘方面经验者优先

制度专栏

返回顶部
触屏版电脑版

© 制度大全 qiquha.com版权所有