数据开发工程师职位描述与岗位职责任职要求

篇2：数据开发高级工程师职位描述与岗位职责任职要求

职位描述：

工作职责：

1、负责数据收集、清洗和规约等工作；

2、提供面向业务的数据服务，完成数据指标的统计、多维分析和展现；

3、根据业务和产品情况，抽象业务逻辑，搭建和开发大数据平台。

任职要求：

1、统招本科或以上学历；

2、精通SQL，有较好的SQL性能调优经验，了解Hive/MySQL的基本原理和调优策略

3、熟悉常用的数据挖掘、分析的工具和方法，熟悉linux平台，精通Shell/Python/PHP等脚本语言的一种或多种，编码基本功扎实；

4、精通Java开发，熟悉大数据处理相关技术，有Hadoop开发经验，掌握MapReduce。

篇3：中级大数据开发工程师职位描述与岗位职责任职要求

职位描述：

职责描述：

1、参与公司商业智能平台的研发工作；

2、参与公司商业智能平台的升级改造工作，包括运维工作。

任职要求：

1、正规院校本科及以上学历，软件、计算机、通信、信息安全、网络工程等相关专业；

2、良好的Java开发背景，熟悉Spring/MyBatis技术体系；

3、良好的SQL功底，熟悉MySQL或Oracle数据库；

4、熟悉Linux；

5、了解开源Pentaho产品，包括PRD、Mondrian、SaiKu、Kettle等；

6、熟悉Hadoop、Hive、HBase、Storm、Spark等大数据平台；

7、沟通能力强，有较强的学习能力，有较强的责任心与良好的团队协作能力。

篇4：高级大数据开发工程师职位描述与岗位职责任职要求

职位描述：

岗位职责：

1.基于公司大数据产品进行数据开发，包括数据的采集，清洗，预处理，存储，建模，分析挖掘等

2.根据业务用户需要分析数据，提供数据支持

3.参与公司大数据产品的运维和监控，保障数据质量和服务稳定性

任职要求：

1.具备本科以上学历,计算机,软件以及相关专业,5年以上大数据开发经验

2.熟悉数据仓库维度建模,并能根据客户需求进行数据开发,向模型更新数据

3.使用过至少一种以上的ETL工具

4.熟练掌握Java,对Hadoop相关的技术和组件(HDFS,MR,Hbase,Hive,Spark,Storm,Kafka等）有全面深入了解

5.熟练掌握Shell或者Python中的一种

6.具备Spark开发经验者优先

7.具备实时计算(Kafka+Storm/SparkStreaming)经验者优先

8.具备数据分析和数据挖掘方面经验者优先

篇5：高级资深数据开发工程师网易考拉250职位描述与岗位职责任职要求

职位描述：

工作职责：

1、利用海量业务数据，设计数据模型，搭建数据仓库；

2、负责解决并实现大数据计算分析需求（离线+实时）；

3、负责数据底层引擎OLAP产品的设计开发工作。

任职要求：

1、本科及以上学历，具有较强的编程能力（Java/Python/SQL）；

2、具有数据仓库、海量数据计算，实时流式计算等相关项目经验；

3、掌握Hadoop、Hive、Spark，Storm，Flink等大数据相关技术者；

4、优秀的数据分析和解决问题能力，能够把理论成功应用于实践；

5、对数据技术有极强的兴趣和热情。