大数据leader职位描述与岗位职责任职要求
职位描述:
岗位职责:
1、负责公司大数据项目的需求分析,整体解决方案的设计、Demo演示及非标等技术支持工作;
2、组建并管理大数据项目开发组;
3、主要负责企业级大数据平台开发框架的设计、性能调优、数据流监控及日常维护;
4、直接参与或指导开发人员基于框架进行海量数据的处理、分析、挖掘;
5、负责开源大数据平台与产品和相关技术的追踪及研究;
6、负责高并发、大存储、实时计算等技术攻关;
7、负责大数据平台及产品研发团队的组织与管理,并进行相关技术培训;
任职要求:
1、大学本科学历以或上,计算数学、数理统计和计算机相关专业背景,8年以上团队管理工作经验,5年以上BI数仓产品规划经验,熟悉产品管理的专业知识;
2、具有Hadoop,HDFS,Hive,Oracle,等大数据技术的项目设计和实施经验,熟悉MES或ERP等相关管理软件应用及实施情况。
3、对主流大数据产品、BI产品的现状和发展趋势有深入了解;
4负责设计过数据分析、数据挖掘、数据可视化、在线数据相关产品经验;
5、了解数据挖掘技术,需要有深入的商业智能或者数据挖掘工作经验,熟悉常见数据挖掘模型算法,精通至少1种数据分析工具;
6、追求高品质产品的精神与热情,对行业动态有足够洞察力及敏锐度;
7、具有优秀的表达、沟通与协调能力、团队合作精神、保密意识;
篇2:大数据应用组负责人职位描述与岗位职责任职要求
职位描述:
职位描述:?
1.负责公司统一实时计算平台,机器学习平台等核心数据开发及应用平台的持续构建和改进工作;
2.为公司其它业务团队提供在线数据支持服务,构建并完善数据链路各环节基础系统,包括但不限于:埋点系统,AB系统,统一数据接口服务系统,用户画像/标签系统等;
3.为公司的渠道,营销,风控等数据强相关场景构建并提供配套数据产品解决方案,包括但不限于:渠道营销管理系统,站内资源流量分发系统,金融风控体系相关系统建设等;
4.负责大数据应用团队的日常管理及项目方案规划;?
?
职位要求:?
1.5年以上大数据相关领域开发和工作经验,2年以上团队管理和项目规划经验;
2.具备较强的跨团队沟通协调能力,习惯价值导向的工作模式,充分了解数据驱动业务的价值;
3.有金融,风控,营销相关业务领域知识背景者优先;
4.有成熟中大型互联网公司数据应用平台和产品从业经验者优先。
篇3:研发经理(大数据)高级研发工程师职位描述与岗位职责任职要求
职位描述:
职责描述:
1)??参与大数据产品及项目需求评审,评估技术的可行性;
2)??负责架构(包括应用架构、技术架构、数据架构等)及技术选型;
3)??负责或参与项目开发过程中的技术攻关及核心代码编写;
4)??配合运维部门对系统架构运维排障;
5)??对部门其他相关开发人员进行技术培训及指导。
?岗位要求:
1)??五年及以上Java开发经验,并有2年以上架构经验;
2)??具备扎实的算法及数据结构基础;
3)??具备超TB级别大数据处理实战经验,熟悉整个大数据的完整处理流程,包括数据的采集、清洗、预处理、存储、分析挖掘和数据可视化,以及架构设计、开发、部署、自动化运维等工作
4)??熟悉主流互联网架构的各种组件,如消息队列(Kafka等)、分布式缓存(如Redis、Memcached等)、NoSQL数据库(MongoDB等)、检索系统(ElasticSearch等)、zookeeper等;
5)??熟悉大数据常见架构(Spark、Storm等)及解决方案,并有2年以上大数据架构实际开发、架构及调优经验者;
6)??诚实守信,品行端正;责任心强,工作主动高效;善于思考;有良好的团队合作精神;有较强的英文阅读能力。
篇4:大数据架构高级工程师职位描述与岗位职责任职要求
职位描述:
工作职责:
1、打造业界领先的存储、计算、调度、监控等基础设施;
2、参与存储、计算、DevInfra、监控当中的一个或多个方向。
任职要求:
1、掌握分布式系统原理,对存储、计算、调度、监控、消息队列、集群管理中的一项或多项有深入的理解和认识;
2、乐于挑战没有明显答案的问题,能快速理解业务场景,从具体问题中抽象出通用的解决方案;
3、存储方向:对HDFS,RocksDB,ceph,HBase,Kafka的一项或多项有经验者优先;
4、计算方向:对YARN,Spark,Flink,Hive的一项或多项有经验者优先;
5、DevInfra方向:对docker,Mesos,Kubernetes的一项或多项有经验者优先;
6、监控方向:对OpenTSDB,InfluxDB,Prometheus,falcon的一项或多项有经验者优先。
篇5:大数据工程师数据流方向职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责字节跳动所有产品线风控方向的数据流和相关数据服务;
2、面向超大规模数据问题,每天处理千亿增量的用户行为数据;
3、负责流式数据的实时传递,清洗,转换,计算,并对外提供查询服务;
4、负责相同数据集的批处理功能。
任职要求:
1、有至少TB以上级大数据处理经验,编码能力强悍,具备生产系统快速trouble-shooting的经验和能力;
2、熟悉大数据处理工具/框架中的一项或多项,包括但不限于Hadoop,Mapreduce,Hive,Storm,Spark,Druid,kafka,hbase,canal,ES等;
3、对开源社区有过贡献者优先,请在简历上说明。