大数据开发工程师(杭州)职位描述与岗位职责任职要求 - 制度大全
制度大全 导航

大数据开发工程师(杭州)职位描述与岗位职责任职要求

编辑:制度大全2020-07-23

职位描述

岗位职责

1.参与大数据精准学平台设计与研发,在大数据采集、存储、分析及应用领域都会有所涉及。

2.参与需求分析、系统架构设计、并完成需求设计相应文档的编写。

3.参与核心代码实现、系统性能优化。

4.保质保量地完成项目组分配的开发任务。

5.协助项目经理进行技术支持工作,共同解决产品研发过程遇到的技术难题。

任职要求

1.具备3年及以上大数据系统开发经验,计算机相关专业本科及以上学历;

2.有实时流处理经验,掌握Flink、Storm等实时处理框架;

3.熟悉并会使用sparkmllib、机器学习、自然语言处理等相关技术和算法;

4.具有Hadoop/Spark,以及kafka、flume、hbase、hive、zookeeper等大数据生态圈实际开发经验。深入了解Hadoop/Spark生态圈产品的工作原理及应用场景;

5.具备较强的数据分析,问题分析,逻辑思维能力,良好的沟通,团队协作能力。

篇2:大数据研发工程师广告系统数据平台职位描述与岗位职责任职要求

职位描述

工作职责

1、广告各类在线业务的离线数据加工与在线数据服务开发与维护;

2、数据服务接口及产品需求研发迭代,代码review、bug修复及日常服务运维;

3、针对海量数据处理和查询需求,设计适应业务变化的合理的多维数据分析系统架构,满足多样性的需求;

4、海量日志清洗加工,并抽象出可以多业务复用的数据模型。

任职要求

1、计算机相关专业本科及以上学历,熟悉Hadoop架构和工作原理,精通MapReduce编程;精通Hive,有HQL优化经验;

2、熟悉JAVA,python等多种编程技术,编程能力强,有web服务开发经验,具备独立完成模块开发能力;

3、理解基本的设计模式,能将业务需求快速理解成技术需求;

4、熟练使用Mysql,熟练使用ElasticSearch、Druid者优先;熟悉其原理者优先;

5、善于沟通,工作积极主动,责任心强,具备良好的团队协作能力;

6、具备良好的问题分析与解决能力,有较强学习能力和逻辑思维能力。

额外加分项::

Github等开源社区贡献者;

具备大规模分布式服务设计能力和经验。

篇3:大数据(高级)研发工程师职位描述与岗位职责任职要求

职位描述

工作职责

1、负责在全球互联网下头条系产品短视频用户体验的持续优化;

2、构建短视频相关数据仓库,分析和报表系统;

3、设计并优化视频播放QoS数据上报机制,构建面向用户体验的APM系统;

4、通过建设实时数据分析,构建智能播放调度策略和自动报警归因系统。

任职要求

1、本科及以上学历,计算机、通信等相关专业,两年及以上全职工作经验;

2、有扎实的编程能力,有优秀的设计和代码品位,有独立的代码实现能力;

3、深刻理解计算机原理,有良好的数据结构和算法基础;

4、熟悉数据采集、清洗入库、统计计算、Web展示核心要点,可实现指标计算需求;

5、熟悉至少一个分布式框架,如Hadoop/YARN、Hive、Spark、Storm、Kafka等,有Flink实时处理经验优先;

6、优秀的理解沟通能力,能快速理解业务背景,责任心强,具有良好的团队沟通与协作能力;

7、有大数据处理、数据平台、数据仓库经验者或数据挖掘算法优先。

篇4:大数据研发工程师抖音火山职位描述与岗位职责任职要求

职位描述

工作职责

1、负责抖音/火山等多个业务线的策略算法建设与优化工作;

2、通过海量数据,分析与挖掘各种潜在关联,不断优化策略效果,保障用户体验;

4、负责实时及离线特征抽取、融合,为数据挖掘及策略平台提供特征服务;

5、负责大数据能力在产品功能上的落地,推动产品数据化和智能化。

任职要求

1、计算机等相关专业,硕士或以上学历,3年以上大数据、人工智能相关经验;

2、熟悉Hive/Hadoop/Spark/Flink/ClickHouse/Druid等大数据开发技术;

3、有良好的业务和产品sense,执行力、推动力强优先;

4、有丰富的行业经验,丰富的专业知识,独特的行业见解,有战略视野和规划能力优先;

5、优秀的理解沟通能力,崇尚数据说话,深信数据在驱动业务、支撑决策上的价值优先。

篇5:大数据研发工程师平台服务方向职位描述与岗位职责任职要求

职位描述

工作职责

1、针对字节跳动全局性数据分析要求,打造行业领先的数据平台,对全球用户数据,打造高效稳定的batch和rt数据流;

2、利用大数据工具,打造计算,传输,分析,监控平台;满足字节跳动全球用户产品的指标计算,多维分析等需求;

3、构建高效稳定的数据服务,支撑字节跳动全球各重要业务的用户增长。

任职要求

1、计算机、数学相关专业本科及以上学历,一年以上大数据开发工作经验,数据挖掘和BI分析领域优先;

2、熟悉多项大数据领域的开源框架,e.g.Hadoop,Hive,Presto,Storm,Spark,Kafka,HBase,Redis,RocksDB,ElasticSearch,Druid等;

3、强悍的编码和学习能力;善于发现问题,积极探索原因。

制度专栏

返回顶部
触屏版电脑版

© 制度大全 qiquha.com版权所有