数据平台大数据开发套件服务端高级工程师职位描述与岗位职责任职要求
职位描述:
工作职责:
1、面向公司的大数据开发套件产品设计与研发,包括大数据任务建设平台,元数据管理系统,数据质量监控平台,任务运维平台等
2、参与需求调研与用户技术支持
3、追求极致,构建业内领先的数据平台产品
任职要求:
1、精通java/scala语言,包括JVM、类装载、线程、并发、IO资源管理、网络
2、扎实的计算机基础,对技术有热情,愿意不断尝试新技术和业务挑战
3、精通SOA架构和微服务架构
4、有IDE开发经验者优先考虑
5、熟悉前端技术的全栈开发工程师优先
6、熟悉hadoopecosystem常用开源框架者优先,例如hadoop/flink/spark等
篇2:数据平台数据传输平台高级工程师职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责公司级别的异构数据源传输平台架构设计与核心技术研发
2、参与需求调研与用户技术支持
3、追求极致,构建业内领先的异构数据源传输产品
任职要求:
1、精通java/scala语言,并发编程,JVM
2、精通数据库技术,RDBMS、NoSQL、大数据至少精通一种
3、精通数据库日志抓取解析、MessageQueue、ETL等数据处理技术
4、扎实的计算机基础,对技术有热情,愿意不断尝试新技术和业务挑战
5、有canal运维或开发经验者优先
6、熟悉hadoopecosystem常用开源框架者优先,例如hadoop/flink/spark等
篇3:数据开发工程师变现业务职位描述与岗位职责任职要求
职位描述:
工作职责:
1、基于海量数据,支持业务对数据的分析和使用;
2、支持业务处理数据的流式处理、分析客户行为等。
任职要求:
1、精通至少一门编程语言,熟练运用各种常用算法和数据结构,有独立的实现能力;
2、熟悉常用的开源组件:Hadoop/Hive/Spark/Storm,并了解其特性和使用场景优先;
3、熟悉机器学习、数据挖掘、数据分析、分布式计算至少某一方面,有较深的理论研究和实践经验优先;
4、数据分析、推荐、机器学习、数据挖掘相关的开发工作优先。