高级大数据架构师职位描述与岗位职责任职要求 - 制度大全
制度大全 导航

高级大数据架构师职位描述与岗位职责任职要求

编辑:制度大全2020-08-14

职位描述

岗位职责

1.负责乐播私有云及大数据系统的规划和架构工作,主导系统的架构设计和核心模块开发,确保项目质量和关键性能指标达成;

2.负责面向PB量级的数据查询、数据计算、数据存储以及数据模型与管理的总体架构与优化,提升数据查询的响应效率;

3.负责平台数据建模和设计工作,数据抽取,数据清洗,数据建模工作,具有ETL设计与开发,数据质量保障,元数据管理,指标体系建立;

4.负责研发技术发展方向,新技术领域的探索,将新技术应用到项目;

任职资格

1.本科及以上学历,5年以上大数据平台架构经验,有多个数据产品开发和实施经验;

2.熟悉BI平台架构,大数据解决方案及hadoop、Spark大数据相关技术,熟悉分布式系统基础设施中常用的技术,如缓存、消息中间件、搜索引擎等,有实践经验者优先;

3.精通Java语言以及J2EE平台特性,熟悉常用的设计模式和开源框架,有大型互联网项目经验或业内知名产品研发经验者优先;

4.精通面向对象分析和设计,并能熟练运用建模工具进行设计工作,且能够指导初中级人员进行开发和设计工作;

5.深刻理解数据结构和算法设计,有系统分析和设计实践经验;

篇2:30359大数据平台高级架构师(深圳)职位描述与岗位职责任职要求

职位描述

工作职责

负责统一用户增长平台的技术架构及建设;

包括不仅限于:

负责每天万亿级增量流式计算引擎架构;

负责存量离线计算引擎分层设计与架构;

负责实时多维计算、分析的平台架构;

负责拖拽交互式可视化引擎的存储计算架构;

负责大数据实时检索分析平台的架构和建设;

负责技术团队的研发流程优化。

跟踪国际、国内商业及开源数据产品的技术选型及平台化预研及架构;

负责>5人的技术或FT团队管理

任职要求

5年以上系统建设,设计,架构经验;4年以上大数据系统开发,设计,架构经验;3年以上软件工程管理经验;

熟悉商业智能系统,熟悉数据仓库,熟悉数据集市;

熟悉大数据相关技术:Flink、kafka、kudu、impala、druid、Hive、HBase;并阅读过相关源码;

管理过存储量上P级,计算日志量万亿以上分析数据平台;

具备按天万级任务量的数据系统的研发经历;

熟悉常用增长黑客实践、熟悉各类分析模型与算法;

熟悉各种抽样方法(分层,过抽样等),特征处理方法(缺失值处理,离散化等);

熟悉数据产品或工具(tableau,GrowingIO,mixpanel等);

具备大数据平台、数据分析平台、可视化开发平台经验,具备中大型成功项目经验优先;具备大规模分布式计算平台的使用和并行算法的开发经验,对大数据处理及应用有浓厚兴趣;

具备较强的团队管理能力和沟通能力,思维活跃,前瞻学习能力强;

了解软件项目管理、敏捷管理方法论,在中大型项目中有所实践。

篇3:大数据架构师职位描述与岗位职责任职要求

职位描述

岗位描述:

1.制定公司的大数据发展(数据驱动、数据中台)规划、技术发展路线,建设合理的数据仓库架构;

2.分析业界大数据技术使用情况,研究未来数据模型和计算框架的创新与落地;

3.领导数据资产管理和系统化的数据模型建设;

4.提升团队大数据能力,塑造团队在行业的技术影响力;

5.对公司其他团队普及大数据技术能力,并带领团队提供大数据使用能力。

岗位要求

1.计算机/应用数学等相关专业、全日制本科及以上学历;

2.具有7年以上大数据架构工作经验,拥有3年以上大型互联网公司相关经验优先;

3.具有很强的数据设计抽象能力,具有海量数据、复杂业务的治理和管理经验;

4.熟悉大数据架构与生态圈技术(如:Hive、HBASE、Storm、Kafka、ES、Kylin等);

5.熟悉大数据技术演变历史,并能够总结发展特点;

6.对数据挖掘、分析、算法、工程化、AI等技术了解者优先;

7.具备良好的沟通协调能力、快速学习能力,强烈的工作主动性和责任心,且热爱技术、具有钻研精神;

篇4:大数据系统架构师职位描述与岗位职责任职要求

职位描述

职责描述

1、负责大数据系统的规划和架构设计工作,主导系统的架构设计与核心模块开发;

2、负责研究技术发展方向,探索新技术领域,将新技术应用到项目;

3、负责技术规范制定,指导开发团队进行实施工作;

4、支持技术团队的建设与能力培养。

任职要求

1、计算机相关专业,硕士及以上学历,5年以上相关工作经验;

2、熟悉大数据相关技术,如Spark、Hadoop、Hive、HBase、Pig、Sqoop、MapReduce等,有丰富的大数据系统架构设计经验;深刻理解大数据系统相关技术和实现;

3、熟悉主流的应用与服务开源框架,如JavaEE相关开源框架,有应用与服务的架构设计经验,熟悉设计模式,面向服务等思想并应用到架构设计当中;

4、了解数据挖掘算法与自然语言处理者优先;

5、熟悉项目管理理论,敏捷开发实践方法,有领导技术团队能力者优先;

6、逻辑思维能力严密,分析判断能力强,具备一定的独立沟通、协调能力。

篇5:架构师技术专家(云平台大数据方向)职位描述与岗位职责任职要求

职位描述

职责描述

1.负责研发网络、系统安全评估和安全加固产品;

2.负责对客户的应用系统进行渗透测试和代码审计;

3.开发安全攻防产品,对流量攻击、WEB方向、软件逆向方向和软件安全周期展开研究;

4.在出现网络攻击或安全事件时,为运维提供紧急响应支撑服务,开发调查取证

任职要求

1、学历:本科及以上

2、专业:计算机、软件工程、电子信息、网络空间安全、信息安全等

3、年龄:28~40

4、性别:不限

5、工作经验:5~10年

6、其他要求:无

制度专栏

返回顶部
触屏版电脑版

© 制度大全 qiquha.com版权所有