数据工程师(DataEngineer)职位描述与岗位职责任职要求 - 制度大全
制度大全 导航

数据工程师(DataEngineer)职位描述与岗位职责任职要求

编辑:制度大全2021-04-20

职位描述

岗位职责

建立基础设施,收集大量原始数据并处理成适合分析的数据

在大量数据的基础上设计和实施近实时数据应用程序

支持业务团队的操作监控请求

任职要求

硕士/学士学位,在相关领域拥有1-2年的工作经验

熟练掌握Java,Python或Scala;熟练使用Linux

Bash

熟悉云计算平台(AliCloud/AWS)

具有大数据平台/编程经验(Hadoop/Spark)

具有数据库使用经验(Oracle/MySQL/MongoDB),精通SQL数据库和SQL编程

加分项:

良好的英语口头和书面沟通能力

篇2:阿里健康合资公司大数据开发工程师职位描述与岗位职责任职要求

职位描述

岗位职责

1、负责公司数据平台项目的ETL设计、实现以及优化。

2、负责ETL流程优化,关键问题解决;

3、研究医院信息化数据,负责数据建模、数据存储设计;

4、使用ETL技术对医院信息系统数据进行提取、清洗、转换和整合;

5、负责基于Hadoop/Spark生态的大数据离线/实时处理平台开发;

6、负责基于阿里云的maxcompute的大数据离线处理平台开发;

7、负责数据源调研、入库、开发的全流程工作,并保证数据质量;

岗位要求

1、有2年以上医疗行业数据建模经验;了解数据建模方法论,并且在项目中实践甚至优化扩展;有大型项目建模经验优先;对数据模型有独到理解;

2、熟悉大数据平台,了解Hadoop、Hive、Hbase,有大型数据中心运维经验或实施经验者优先;

3、2年以上医院业务信息化实施开发经历优先;有His、Emr开发经验优先;

4、有数据仓库ETL经验,对调度、元数据、数据质量等有一定理解;

5、有良好的逻辑思维能力,主动思考,善于学习,与团队沟通无障碍;

6、熟悉java,python,shell,scala等任一种开发语言;

7、拥有良好的沟通、表达能力,工作认真负责,学习能力强,执行力强,乐于接受挑战并具备较好的承压能力;

篇3:数据开发工程师岗位职责

数据库开发工程师融智投资深圳市排排网投资管理股份有限公司,排排网,私募排排网,融智投资,排排网岗位职责:

1.负责数据库建模及开发;

2.负责维护现有公司主站、数据中心数据库;

3.负责现有数据库性能及架构的优化;

4.负责解决日常出现的存储过程错误及数据错误,并给出解决方案;

5.负责数据库运维工作(同步、建库);

6.负责数据库技术架构;

岗位要求:

1.拥有5年以上MYSQL(或Oracle)数据库管理、开发、设计及系统支持经验;

2.精通SQL语法,有能力编写较复杂T-SQL脚本;

3.精通MySQL的主从复制,了解至少一种HA方案;

4.熟悉Linux系统的操作和基本排障方法;

5.工作踏实,认真仔细,善于总结,责任心强;

6.有ETL工具开发经验者优先考虑;

篇4:数据库技术工程师岗位职责

高级区块链开发工程师(区块链技术架构/区块链数据库优化方向)北京阿希链科技有限公司北京阿希链科技有限公司,阿希链,阿希链岗位职责:

*区块链产品底层设计开发工作

*区块链产品的优化工作

*参与区块链产品架构设计

任职要求:

*拥有良好的逻辑能力和问题解决能力,三年以上开发经验;

*有良好的沟通能力和团队协作能力,工作严谨、有激情、自我驱动;

*深入理解面向对象技术,熟练使用任意一种面向对象语言及开发工具;

*熟练使用Javascript语言及其后端开发技术栈相关工具,熟练使用C++/Java/Go三者任一种语言;

*有良好编程习惯,熟悉常用数据结构及相关算法;

*熟悉网络技术原理,能熟练进行网络编程;

*深入理解数据库原理,熟练掌握Oracle、MySQL、SQLServer等任意一种主流关系数据库,熟悉常见NoSQL数据库;

*熟悉Linux环境并有相关开发经验,熟悉常用开源工具和常见开发过程及方法;

*有区块链行业相关知识优先,有分布式应用系统设计及开发经验优先;

*参与过知名开源项目开发优先,有大容量服务设计开发经验优先。

*有架构设计经验或系统性能优化经验优先。

*熟练使用Typescript语言开发优先。

篇5:DBA数据库开发工程师岗位职责

DBA数据库开发工程师岗位职责:

1.熟悉云平台数据库产品

2.精通Mysql数据库运行机制及原理

3.精通Mysql高可用、高性能、高扩展等系统设计,具备实际运维管理经验

4.精通数据库自动化运维设计规划能力

5.了解MongoDB、Redis、Hbase等数据库产品

任职要求

1.对现有业务数据库进行全方位了解,对数据库进行日常管理,维护,备份,同步

2.对数据设计进行规范设计并进行检查

3.对业务sql进行审核优化

4.对数据库进行解耦拆分冗余建立方案,避免数据库大泥团问题

5.排查业务中存在的慢查询,提出优化意见

6.对缓存数据以及队列MQ进行管理

7.维护数据库中间件mycat实现读写分离以及数据拆分

岗位职责:

1.熟悉云平台数据库产品

2.精通Mysql数据库运行机制及原理

3.精通Mysql高可用、高性能、高扩展等系统设计,具备实际运维管理经验

4.精通数据库自动化运维设计规划能力

5.了解MongoDB、Redis、Hbase等数据库产品

任职要求

1.对现有业务数据库进行全方位了解,对数据库进行日常管理,维护,备份,同步

2.对数据设计进行规范设计并进行检查

3.对业务sql进行审核优化

4.对数据库进行解耦拆分冗余建立方案,避免数据库大泥团问题

5.排查业务中存在的慢查询,提出优化意见

6.对缓存数据以及队列MQ进行管理

7.维护数据库中间件mycat实现读写分离以及数据拆分

制度专栏

返回顶部
触屏版电脑版

© 制度大全 qiquha.com版权所有