数据架构职位描述与岗位职责任职要求 - 制度大全
制度大全 导航

数据架构职位描述与岗位职责任职要求

编辑:制度大全2020-08-03

职位描述

职责描述

1.依各大数据分析项目所需,搭建、研究或规划机器学习开原框架运算环境;

2.设计、优化、监控或维护自动化分析建模作业流;

3.各大数据分析项目布署至内云作业。

任职要求

1.具备深度学习相关框架(Tensorflow,Theano,Keras等)经验2年以上;

2.具备开源框架研究及自行搭建之能力;

2.熟悉Linux相关安装设定;

3.具备ETL开发经验1年以上;

4.具备hadoop数据分析程序开发能力,熟python、java、Spark、shallscript等;

5.有制造业数据收集、处理经验尤佳。

篇2:数据仓库系统架构师职位描述与岗位职责任职要求

职位描述

岗位职责

1.负责海量数据的整体架构设计和数据架构管控、根据具体业务和产品对数据模型进行统一分析和规划;

2.负责企业级信息架构(如业务数据对象识别、数据实体、数据属性分析、数据标准、端到端数据流等)的设计与优化;确保变革方案对架构遵从,并协助推动跨领域重大数据问题的分析、定位、解决方案设计和落地;

3.负责技术设计及技术实现规范编制,指导开发团队进行项目设计、项目实现及技术汇报;

4.负责项目重点模块的功能设计和难点攻坚;

5.对开发团队提供架构导引、技术监督和风险预判,确保开发技术框架不偏离正确方向;

6.配合项目经理进行技术决策、风险评估、及技术架构宣贯和推广;

7.其他部门发展所需承担的必要工作。

任职要求

1、计算机相关专业本科以上学历。有5年及以上架构师工作经验,有3年以上大数据相关领域工作经验。

2、具有扎实的大数据和数据仓库的理论功底,负责过大数据平台或数据仓库设计。

3、算法基础扎实,熟悉常见的数据结构,深入理解分布式算法和分布式系统原理。

5、善于沟通,有良好的文档写作能力,良好的沟通能力和团队合作精神,良好的抽象思维,理性做出技术决策,具有风险控制意识。

篇3:架构工程师实时监控数据中间件职位描述与岗位职责任职要求

职位描述

负责架构部核心项目之一:实时监控平台

平台目标覆盖数万节点的基础设施层、应用与服务层以及业务活动层的实时动态监控,能够及时全面的反映整个系统各层面的运行状况。

主要职责:

1.整体负责实时监控平台的需求和团队管理工作;

2.和各技术团队沟通确认集成或数据采集处理方案,以及监控需求;

3.控制项目需求优先级,把控有效输出,迭代方式不断呈现监控平台的价值产出;

任职要求

1.对技术仍保持热情,为人积极,理解沟通能力优秀;

2.有多年分布式系统架构以及线上排障经验,熟悉线上运维优先;

3.至少熟悉一种分布式监控跟踪系统,如Zabbix,小米Open-Falcon,阿里鹰眼,谷歌Dapper,大众点评CAT,eBayEagle,各类APM等;

4.熟悉ElasticSearch、Hadoop、HBase、Spark、Flink、流式处理等

5.有数字可视化落地经验,熟悉ITIL、服务治理优先;

篇4:大数据平台架构师职位描述与岗位职责任职要求

职位描述

岗位职责

?负责云平台大数据平台的架构设计;

?云平台的数据治理、数据图谱、数据湖的设计与开发;

?大数据计算任务的需求分析、设计、开发和调优;

任职要求

?五年以上大数据相关开发经验;

?精通大数据架构体系,有两年以上大数据平台的架构经验;

?精通Java、Python、Scala编程语言中的一种或多种;

?精通大数据实时计算、离线计算相关技术,如MapReduce,Storm,Spark,Flink,ElasticSearch等,有项目实战经验者优先;

?精通0zzie,Azkaban,Airflow等大数据计算调度框架,有开发过调度框架者优先;

?精通大数据生态环境的常用中间件,如Fluentd、Kafka、Logstash等;

?有工作热情,爱岗敬业,有良好的抗压能力和团队协作能力。

篇5:大数据架构资深工程师职位描述与岗位职责任职要求

职位描述

工作职责

1、打造业界领先的存储、计算等分布式系统;

2、为海量数据和大规模业务系统提供可靠的基础设施。

任职要求

1、掌握分布式系统原理,对存储、计算、消息队列、集群管理中的一项或多项有深入的理解和认识;

2、乐于挑战没有明显答案的问题,能快速理解业务场景,从具体问题中抽象出通用的解决方案;

3、存储方向:对HDFS,RocksDB,LevelDB,memcache,redis,MySQL,HBase,Kafka的一项或多项有经验者优先;

4、计算方向:对Spark,MapReduce,Storm,Hive,Presto,Impala的一项或多项有经验者优先;

5、集群管理方向:对YARN,Mesos的一项或多项有经验者优先;

6、向开源社区贡献过patch者优先,请在简历上说明。

制度专栏

返回顶部
触屏版电脑版

© 制度大全 qiquha.com版权所有