数据工程师企业SaaS应用职位描述与岗位职责任职要求
职位描述:
工作职责:
1、根据不同的业务场景,构建业务指标体系,建立和完善日常业务报告体系,能够及时、准确、完整的披露公司整体及各项目的运作情况;
2、参与数据仓库架构设计与数据开发,建设共享数据仓库;
3、通过专项分析,输出专项分析报告,为业务模块的决策和产品方向提供数据支持;
4、参与数据底层的工具、平台、部署流程等技术体系建设的研发工作。
任职要求:
1、本科及以上学历;
2、熟悉数据仓库模型设计方法论,并有实际模型设计及ETL开发经验;
3、掌握大型数据库开发技术,如Oracle、Teradata、DB2、Mysql等等掌握至少一种,灵活运用SQL实现海量数据ETL加工处理与查询性能调优;
4、熟悉常用的数据挖掘、分析的工具和方法,有数据挖掘工作经验;熟悉linux平台,精通shell/c(c++)/php/python/等脚本语言的一种或多种,编码基本功扎实;
5、具备快速学习能力、沟通协调能力及团队精神,有较强的责任心和学习积极性。
篇2:大数据工程师(电商行业)职位描述与岗位职责任职要求
职位描述:
工作职责:
1、基于hive的数据仓库建设、ETL开发;
2、使用Hive/Flink等平台进行分析内部及外部的数据,配合业务团队进行定量和定性分析,把数据转化成为业务增值的信息;
3、探索、评估新的技术和解决方案,提高数据并行计算能力和运行速度。
任职要求:
1、熟悉大数据相关技术:Kafka/Flink/Hadoop/Druid/HBase等;
2、具备数据库系统理论知识,掌握主流数据库管理和应用,精通SQL;
3、了解统计以及数据挖掘、机器学习、人工智能技术,会使用关联分析、分类预测、聚类分析等常用分析方法;
4、熟练使用Java、Python、PHP、Go语言中的一种或者多种;
6、两年以上大数据开发经验,有高性能分布式平台开发经验,有电商行业经验优先。
篇3:时序数据库研发工程师职位描述与岗位职责任职要求
职位描述:
工作职责:
1、研发高性能时序数据库,支持包括抖音,西瓜视频在内的等各个业务的时序数据的存储、查询和处理;
2、研发日志平台(Elasticsearch),满足海量日志存储和检索需求;
3、研发实时OLAP,支持海量多数据源join查询;
4、研发时序数据处理智能化(异常检测、预测和关联分析等)。
任职要求:
1、熟悉时序数据库influxdb、opentsdb、kariosdb、prometheus等经验优先;
2、有异常检测算法实践优先,有cmdb研发经验优先;
3、对3sigma,ARIMA,IsolationForest,FPGrowth模型有了解优先;
4、有ML工程化经验优先。
篇4:数据研发工程师新业务职位描述与岗位职责任职要求
职位描述:
工作职责:
1.负责业务相关的数据平台建设;
2.包括数据Pipeline建设、数据仓库建设、运营系统建设等;
3.通过海量数据,分析用户行为,进行特征挖掘建设。
任职要求:
1.工作经验1-3年,学历本科及以上;
2.有扎实的编程能力,有优秀的代码品位,对解决具有挑战性问题充满激情;
3.编程语言不限,有Python经验更佳,熟悉常用算法和数据结构;
4.熟悉常用的开源组件:Hadoop/Hive/Kafka/Flink/Spark等,并了解其特性和使用场景优先;
5.优秀的沟通理解能力,能快速理解业务,用数据解读业务。
篇5:搜索数据研发工程师职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责ByteDance链接理解的研发工作,用最前沿的机器学习算法,进行全网链接分析;
2、负责链接规模控制,进行有效性和价值度判断,实现链接反垃圾、反作弊等;
3、负责链接关系深度挖掘,实现链接归一化、镜像站、PC移动站等。
任职要求:
1、计算机或相关专业,本科及以上学历,对数据结构和算法设计有较为深刻的理解;
2、精通C/C++或python语言编程,熟悉linux平台、shell编程;
3、出色的分析问题,解决问题能力;
4、熟悉搜索相关领域,有机器学习/深度学习经验者优先。