大数据高级研发职位描述与岗位职责任职要求 - 制度大全
制度大全 导航

大数据高级研发职位描述与岗位职责任职要求

编辑:制度大全2020-08-15

职位描述

工作职责

1、负责大数据平台的系统架构、方案设计;

2、根据项目需求,分析,设计,并实现系统的架构方案。使系统架构具有合理性和可扩展性;

3、负责开发数据统计系统,海量数据分析/查询、分布式存储、流式/实时计算等应用层架构搭建及核心代码实现;

4、技术难题攻关,持续提升核心系统性能,保证系统的安全、稳定、快速运行;

任职要求

1、熟悉Hadoop底层文件系统,熟悉Hadoop分布式计算框架,熟悉掌握HDFS、Hbase、Hive、Mapreduce、Spark、Storm、Flink等.

2、精通Java,golang,Python至少两种编程语言,有较强的分布式计算基础和软件工程能力

3、熟悉业界有影响力数据仓库和大数据领域的产品、解决方案形态和技术,熟悉OLAP、OLTP引擎和DB,熟悉主流数据整合、治理技术和工具;

4、熟悉大数据和数仓领域的系统架构设计方法,有海量数据系统的安装部署维护经验,对大规模数据并行计算/传输/处理等有丰富的经验者优先;

5、熟悉掌握通用大数据数据合并、建模、抽取、分析挖掘机、展示等挖掘算法,具有在实际项目中结合业务场景开发大数据算法的经验者优先;

6、有大型分布式、高并发、高负载、高可用系统设计、开发和调优经验者优先;

篇2:30628腾讯广告大数据后台开发高级工程师(研发中心北京)职位描述与岗位职责任职要求

职位描述

工作职责

负责广告在线预估服务的架构设计和开发,支持高并发,高可用,低延迟;

负责广告平台用户画像线上系统的开发和维护;

负责高可用的任务调度系统开发,支持各种离线任务的分发和调度;

任职要求

重点大学本科以上学历,计算机相关专业;

两年以上相关工作经验,精通算法与数据结构,精通c++编程语言;

有扎实的编程功底和编码习惯,以及良好的分析解决问题能力;

熟悉机器学习框架和分布式系统,熟悉tensorflow等机器学习框架者优先;

积极主动,有责任心,勇于接受挑战。

篇3:研发经理(大数据)高级研发工程师职位描述与岗位职责任职要求

职位描述

职责描述

1)??参与大数据产品及项目需求评审,评估技术的可行性;

2)??负责架构(包括应用架构、技术架构、数据架构等)及技术选型;

3)??负责或参与项目开发过程中的技术攻关及核心代码编写;

4)??配合运维部门对系统架构运维排障;

5)??对部门其他相关开发人员进行技术培训及指导。

?岗位要求

1)??五年及以上Java开发经验,并有2年以上架构经验;

2)??具备扎实的算法及数据结构基础;

3)??具备超TB级别大数据处理实战经验,熟悉整个大数据的完整处理流程,包括数据的采集、清洗、预处理、存储、分析挖掘和数据可视化,以及架构设计、开发、部署、自动化运维等工作

4)??熟悉主流互联网架构的各种组件,如消息队列(Kafka等)、分布式缓存(如Redis、Memcached等)、NoSQL数据库(MongoDB等)、检索系统(ElasticSearch等)、zookeeper等;

5)??熟悉大数据常见架构(Spark、Storm等)及解决方案,并有2年以上大数据架构实际开发、架构及调优经验者;

6)??诚实守信,品行端正;责任心强,工作主动高效;善于思考;有良好的团队合作精神;有较强的英文阅读能力。

篇4:大数据研发经理职位描述与岗位职责任职要求

职位描述

岗位职责

1、负责大数据团队建设和管理工作;

2、负责公司的大数据平台的建设与开发;

3、参与大数据关键技术方案论证评审和技术投标方案编写;

4、负责产品/项目的需求调研、数据分析及数据挖掘建模等工作;

5、大数据平台的新技术调研,指导和培养工程师。

任职要求

1、计算机相关专业,5年及以上工作经验,有至少2个以上的大数据项目研发和管理经验;

2、熟练使用hadoop及hadoop生态圈中的常用组件原理及应用,对基于Spark、Sqoop、HBase、Hive、

Flume、Kafka、Storm、MapReduce、HDFS、YARN等组件开发使用有深入理解;

3、熟悉Linux开发环境及JAVA开发,熟悉Spring、SpringMVC、Mybatis等常用Java框架;

4、对数据结构和算法设计具有深刻的理解,熟悉常用数据挖掘算法,并有一定的算法实现调优经验;

5、具有良好的方案编写能力,良好沟通能力和团队合作精神,工作认真细致,责任心强。

篇5:大数据平台研发职位描述与岗位职责任职要求

职位描述

职责:hadoop平台功能研发,如性能优化、身份认证&权限控制插件等

1.修改hadoop等分布式平台源码,优化数据处理逻辑;

2.针对hadoop等分布式平台,构建统一的身份认证及权限控制系统;

3.动态脱敏系统及安全控制策略研究及落地;

4.解析常用的大数据平台通信协议

要求:

1.熟练掌握C/C++,JAVA中的至少一种编程语言;

2.熟练掌握常用大数据平台组件的使用;

3.深入理解常用大数据平台的架构原理,如mr、spark、hive等;

4.熟悉TCP/IP协议栈,对常用应用层协议如HTTP有较深理解;

5.熟悉Thrift、gRPC等rpc框架及protobuf等序列化框架;

6.熟悉常用大数据平台的安全组件和控制策略

职位诱惑:

1.试用期薪资不打折不打折

2.公积金按定薪全额的12%缴纳,全额的12%哦

3.入职即享带薪年假

4.周末双休

5.弹性工作制

6.大牛导师带你飞

7.强大平台!任你表演

8.月度团建吃喝玩乐等你来解锁

制度专栏

返回顶部
触屏版电脑版

© 制度大全 qiquha.com版权所有