数据工程师职位描述与岗位职责任职要求
职位描述:
岗位职责:
1、根据业务需求,进行数据项目的需求分析、模型设计、ETL设计开发;
2、负责把业务数据接入、处理、存储到数据库;
3、搭建数据集成平台,实现数据采集自动化;
4、负责ETL的性能、存储、调试等。
任职要求:
1、有Hadoop、Hive等大数据开发实在经验;
2、了解/熟悉银行业务或信托业务或零售等业务,有1年以上数据类项目设计与开发经验;
3、2年以上工作经验,其中至少有1年以上ETL相关工作经验;
4、要求熟练使用主流数据库Oracle、Mysql、DB2等;
5、熟悉一种或多种ETL工具优先考虑,Informatica,kettle等;
6、熟悉Linux开发环境,有Java后台开发经验;掌握R,Spark,python,Js更佳;
8、了解关系数据库理论、数据仓库架构及原理、数据仓库实施方法论。
篇2:商业化数据平台前端研发工程师职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责商业化一站式数据服务平台的设计与开发,搭建行业领先的数据分析、收入预测及监控、元数据管理平台;
2、深入理解主要数据可视化展现形式,针对业务场景梳理数据信息,提出一站式的数据解决方案;
3、对具体的数据产品进行前端性能优化,提供流畅的交互体验。
任职要求:
1、精通前端技术,包括HTML/javascript/CSS等,熟悉es6语法;
2、至少熟练掌握nodejs/reactjs/vuejs中的一种前端框架,能独立开发通用的组件;
3、熟悉数据可视化库,如ECharts/D3.js/HighCharts,并有过相关开发经验;
4、至少掌握一种前端打包构建工具,如webpack/gulp/fis等;
5、熟悉python语言后端开发者优先;
6、对ui视觉交互和前端数据展现有自身独到的理解,能够打造可用性强,体验流畅的数据产品。
篇3:数据平台分布式任务调度平台高级工程师职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责公司级别分布式任务调度的架构设计与核心技术研发
2、参与需求调研与用户技术支持
3、追求极致,构建业内领先的任务调度平台
任职要求:
1、精通java/scala语言,并发编程,JVM
2、深入了解分布式系统原理,包括高可用策略,分布式一致性协议,分布式编程模型等
3、扎实的计算机基础,对技术有热情,愿意不断尝试新技术和业务挑战
4、具备大型分布任务调度、定时调度、工作流调度系统开发经验者优先
5、熟悉hadoopecosystem常用开源框架者优先,例如hadoop/flink/spark等