高级资深ETL工程师职位描述与岗位职责任职要求

编辑:制度大全2020-07-19

职位描述：

岗位职能：

1.基于公司数据建设需要，完成数据平台构建、数据内容开发等工作。包括：数据平台基础设施建设、数据采集、ETL、数仓及数据集市、数据应用产品等开发工作；

2.充分理解需求文档，基于此进行自测，交付高质量的开发代码和数据内容；

3.工作中对数据平台基础设施、数据内容建设等工作主动深度思考，提升效能并积极建言、促进组织和系统发展；

4.其他根据部门需要安排事宜；

岗位要求：

1.信息技术类、数学、统计学、计量经济学类专业，研究生及以上学历。优秀候选人学历可以放宽至本科，工作年限5年以上；

2.熟悉数据仓库模型设计和精通ETL开发经验，掌握3NF,Kimball的维度建模设计方法，具备海量数据加工处理（ETL）相关经验；

3.掌握至少一种数据库开发技术：Oracle、Teradata、DB2、Mysql等，精通并灵活运用SQL实现海量数据ETL加工处理；

4.熟悉Linux系统常规shell处理命令，灵活运用shell做的文本处理和系统操作；

5.有从事分布式数据存储与计算平台应用开发经验，熟悉Hadoop生态相关技术并有相关实践经验着优先，重点考察Hdfs、Hive（HQL)、Hbase；

6.熟练掌握一门或多门编程语言，并有大型项目建设经验者优先，重点考察Python、Perl、java；

7.熟悉数据仓库领域知识和技能者优先，包括但不局限于：数据开发测试工具与方法、数据质量等；

8.良好的语言沟通与表达能力和自我驱动动力。

篇2：ETL数据工程师岗位职责任职要求

ETL数据工程师岗位职责

岗位职责:

1.参与金融大数据研发;

2.参与数据仓库ETL流程的优化及解决ETL相关技术问题;

3.负责数据基础架构的升级和优化,不断提升系统的稳定性和效率;

4.设计并实现对机器学习、数据挖掘的系统性支持;

岗位要求:

1.计算机相关专业,本科及以上学历;

2.具备良好的编程习惯,熟悉常用的数据结构和算法;

3.熟练掌握PHP/Python/java任一语言;

4.具备良好的数据库理论基础知识,较强的sql书写能力,熟练使用MySQL/postgres等数据库;

5.有数据处理,ETL流程优化实战经验,熟悉kettle/informatica等抽取工具;

6.有使用kafka,storm,sparkstreaming实时数据处理系统建设经验优先。

ETL数据工程师岗位

篇3：中级ETL工程师岗位职责

中级ETL工程师比孚科技上海比孚信息科技有限公司,比孚,比孚科技,比孚职位描述:

1.负责数据仓库/数据集市ETL设计开发;

2.负责与业务部门数据需求的沟通与确认;

任职资格:

1.三以上工作经验;

2.熟悉主流ETL开发工具,如:SSIS、Kettle、Datastage等;

3.熟练掌握主流数据库的使用,如:SQLServer、Mysql、Oracle,对SQL查询优化有丰富的经验;

4.熟悉主流报表工具,如:Tableau、PowerBi、Cognos;

5.良好的沟通技能,清晰的逻辑思维能力;

6.工作认真仔细,积极主动,具备较强的自主学习、自我总结能力。