高级大数据架构师职位描述与岗位职责任职要求
职位描述:
岗位职责
1.负责乐播私有云及大数据系统的规划和架构工作,主导系统的架构设计和核心模块开发,确保项目质量和关键性能指标达成;
2.负责面向PB量级的数据查询、数据计算、数据存储以及数据模型与管理的总体架构与优化,提升数据查询的响应效率;
3.负责平台数据建模和设计工作,数据抽取,数据清洗,数据建模工作,具有ETL设计与开发,数据质量保障,元数据管理,指标体系建立;
4.负责研发技术发展方向,新技术领域的探索,将新技术应用到项目;
任职资格:
1.本科及以上学历,5年以上大数据平台架构经验,有多个数据产品开发和实施经验;
2.熟悉BI平台架构,大数据解决方案及hadoop、Spark大数据相关技术,熟悉分布式系统基础设施中常用的技术,如缓存、消息中间件、搜索引擎等,有实践经验者优先;
3.精通Java语言以及J2EE平台特性,熟悉常用的设计模式和开源框架,有大型互联网项目经验或业内知名产品研发经验者优先;
4.精通面向对象分析和设计,并能熟练运用建模工具进行设计工作,且能够指导初中级人员进行开发和设计工作;
5.深刻理解数据结构和算法设计,有系统分析和设计实践经验;
篇2:30359大数据平台高级架构师(深圳)职位描述与岗位职责任职要求
职位描述:
工作职责:
负责统一用户增长平台的技术架构及建设;
包括不仅限于:
负责每天万亿级增量流式计算引擎架构;
负责存量离线计算引擎分层设计与架构;
负责实时多维计算、分析的平台架构;
负责拖拽交互式可视化引擎的存储计算架构;
负责大数据实时检索分析平台的架构和建设;
负责技术团队的研发流程优化。
跟踪国际、国内商业及开源数据产品的技术选型及平台化预研及架构;
负责>5人的技术或FT团队管理
任职要求:
5年以上系统建设,设计,架构经验;4年以上大数据系统开发,设计,架构经验;3年以上软件工程管理经验;
熟悉商业智能系统,熟悉数据仓库,熟悉数据集市;
熟悉大数据相关技术:Flink、kafka、kudu、impala、druid、Hive、HBase;并阅读过相关源码;
管理过存储量上P级,计算日志量万亿以上分析数据平台;
具备按天万级任务量的数据系统的研发经历;
熟悉常用增长黑客实践、熟悉各类分析模型与算法;
熟悉各种抽样方法(分层,过抽样等),特征处理方法(缺失值处理,离散化等);
熟悉数据产品或工具(tableau,GrowingIO,mixpanel等);
具备大数据平台、数据分析平台、可视化开发平台经验,具备中大型成功项目经验优先;具备大规模分布式计算平台的使用和并行算法的开发经验,对大数据处理及应用有浓厚兴趣;
具备较强的团队管理能力和沟通能力,思维活跃,前瞻学习能力强;
了解软件项目管理、敏捷管理方法论,在中大型项目中有所实践。
篇3:大数据架构师职位描述与岗位职责任职要求
职位描述:
岗位描述:
1.制定公司的大数据发展(数据驱动、数据中台)规划、技术发展路线,建设合理的数据仓库架构;
2.分析业界大数据技术使用情况,研究未来数据模型和计算框架的创新与落地;
3.领导数据资产管理和系统化的数据模型建设;
4.提升团队大数据能力,塑造团队在行业的技术影响力;
5.对公司其他团队普及大数据技术能力,并带领团队提供大数据使用能力。
岗位要求:
1.计算机/应用数学等相关专业、全日制本科及以上学历;
2.具有7年以上大数据架构工作经验,拥有3年以上大型互联网公司相关经验优先;
3.具有很强的数据设计抽象能力,具有海量数据、复杂业务的治理和管理经验;
4.熟悉大数据架构与生态圈技术(如:Hive、HBASE、Storm、Kafka、ES、Kylin等);
5.熟悉大数据技术演变历史,并能够总结发展特点;
6.对数据挖掘、分析、算法、工程化、AI等技术了解者优先;
7.具备良好的沟通协调能力、快速学习能力,强烈的工作主动性和责任心,且热爱技术、具有钻研精神;
篇4:大数据系统架构师职位描述与岗位职责任职要求
职位描述:
职责描述:
1、负责大数据系统的规划和架构设计工作,主导系统的架构设计与核心模块开发;
2、负责研究技术发展方向,探索新技术领域,将新技术应用到项目;
3、负责技术规范制定,指导开发团队进行实施工作;
4、支持技术团队的建设与能力培养。
任职要求:
1、计算机相关专业,硕士及以上学历,5年以上相关工作经验;
2、熟悉大数据相关技术,如Spark、Hadoop、Hive、HBase、Pig、Sqoop、MapReduce等,有丰富的大数据系统架构设计经验;深刻理解大数据系统相关技术和实现;
3、熟悉主流的应用与服务开源框架,如JavaEE相关开源框架,有应用与服务的架构设计经验,熟悉设计模式,面向服务等思想并应用到架构设计当中;
4、了解数据挖掘算法与自然语言处理者优先;
5、熟悉项目管理理论,敏捷开发实践方法,有领导技术团队能力者优先;
6、逻辑思维能力严密,分析判断能力强,具备一定的独立沟通、协调能力。
篇5:架构师技术专家(云平台大数据方向)职位描述与岗位职责任职要求
职位描述:
职责描述:
1.负责研发网络、系统安全评估和安全加固产品;
2.负责对客户的应用系统进行渗透测试和代码审计;
3.开发安全攻防产品,对流量攻击、WEB方向、软件逆向方向和软件安全周期展开研究;
4.在出现网络攻击或安全事件时,为运维提供紧急响应支撑服务,开发调查取证
任职要求:
1、学历:本科及以上
2、专业:计算机、软件工程、电子信息、网络空间安全、信息安全等
3、年龄:28~40
4、性别:不限
5、工作经验:5~10年
6、其他要求:无
制度专栏
热点制度职责
- 资深JAVA工程师架构师职位描述与岗位职责任职要求
- 无人机服务平台架构师职位描述与岗位职责任职要求
- 系统架构师互联网项目组职位描述与岗位职责任职要求
- 30628腾讯广告大数据后台开发高级工程师(研发中心北京)职位描述与岗位职责任职要求
- PCG09信息流后台方案架构师职位描述与岗位职责任职要求
- 微信支付大数据平台开发工程师职位描述与岗位职责任职要求
- 30359大数据平台高级架构师(深圳)职位描述与岗位职责任职要求
- 大数据平台开发工程师职位描述与岗位职责任职要求
- 30359大数据计算平台Java后台开发工程师职位描述与岗位职责任职要求
- 23295互娱营销类大数据系统后台开发工程师(深圳)职位描述与岗位职责任职要求