高级Hadoop开发工程师职位描述与岗位职责任职要求

编辑:制度大全2021-04-23

职位描述：

职责描述：

1，基于Hadoop进行MapReduce、Hive和HBase的应用开发；

2，维护和管理大规模Hadoop集群，解决不断增长的海量数据带来的存储和计算挑战；

3，大数据平台数据清洗、转换和建模的开发。

任职要求：

1，熟悉Hadoop/HBase/Spark/hive生态环境体系的搭建和管理，掌握Hadoop、HBase、MapReduce、HDFS、Hive、Kylin、Zookeeper等开源项目的原理和使用方法，具有实际集群搭建和调优经验；

2，熟悉并有Java开发经验，有大平台架构开发经验；

3，掌握至少一种NoSQL数据库，具有真正项目使用经验；

4，掌握数据分析的基本流程，擅长数据采集、清洗、分析等环节；

5，熟悉后端服务（RestfulApi服务实现）优先；

6，熟悉使用sqlserver、oracle、mysql一种；

7，良好团队协作和沟通能力；

8，大专及以上学历，3-5年及以上工作经验。

篇2：应用开发工程师（JAVA方向）职位描述与岗位职责任职要求

职位描述：

岗位职责：

1.负责数据平台的建设，包括各种大数据应用系统，中间件模块的设计和开发。

2.对全链路数据质量负责，进行实时监控，分析，最终提供低延时，高可用等指标。

3.对接数据平台上的各种业务方，满足不断发展的业务系统建设需求，建设数据开放平台、用户画像、报表、营销系统等应用层服务。

岗位要求：

1、计算机、数学等相关专业，本科及以上学历，3年或以上工作经验；

2、扎实的Java开发功底，理解IO、多线程、集合、并发包，对JVM原理有较好的了解；

3、掌握分布式系统原理，对存储、计算、消息队列中一项或多项有深入的理解和认识；

4、熟悉主流微服务架构设计及具备落地能力；

5、对大数据计算相关组件如：Hadoop/Spark/Flink等有所了解；

6、挑战没有明显答案的问题，能快速理解场景，从具体问题中抽象出通用的解决方案；

7、互联网公司产品研发经历者优先；

篇3：数据平台开发工程师（万物智联）职位描述与岗位职责任职要求

职位描述：

职责描述：数据平台开发

任职要求：1年以上数据平台开发经验，熟悉mongodb、mysql等，熟悉cache、MQ等，熟悉tcp、udp等通信标准，能够使用C++优先吗，有物联网开发经验优先。

（注：万物智联公司设立在晋江和北京两地，如有意向往北京发展，则刚入职半年内在晋江工作，考核合格后可选择是否去北京。）

工作时间：大小周7.5H工作制