数据系统架构师岗位职责
数据系统架构师主要职责:
1.负责数据平台、数据仓库架构的规划与设计;
2.负责数据平台的整体数据架构设计,完成从业务模型到数据模型的设计工作,熟悉业务模型分析及转换,具备较强的业务理解和业务抽象能力,善于从复杂现象中抽象根本问题,分析根本原因,并形成最合适的快速解决方案;
3.负责根据业务功能、业务模型,进行数据库建模设计,具备大型企业级数据库模型设计能力,对能源类系统,元数据系统有非常深刻的认识和理解,能解决能源类系统数据价值应用的关键问题。
4.完成各种面向业务目标的数据分析模型的定义和应用开发,
5.负责数据平台的数据提取、数据挖掘及数据分析,具有良好的商业敏感度和优秀的数据分析技能,能够解决复杂的算法问题。
6.负责和各个业务系统之间的数据对接,把控客户各业务部门的数据需求;
7.带领团队成员一起完成数据应用工作的流程、规范和方法的建立。
岗位要求:
经验
1.8年以上IT行业工作经验,具有丰富的信息系统设计、实施经验;
2.具有5年以上企业级数据平台、数据仓库设计经验;
3.丰富的数据架构规划、数据建模、数据库设计以及程序设计、开发经验;
4.丰富的数据解决方案或数据架构(数据仓库、数据集成、数据管理)构建经验;
5.丰富的基于开源技术的提供大数据解决方案的经验;
6.熟悉常用的分析、统计、建模方法,熟悉数据仓库相关技术,如ETL、报表开发,熟悉分布式计算的设计,了解在能源企业从数据化到决策分析过程中会遇到的各种问题,并有过实战经验。
Skills&Competences:
技能和能力:
1.深入了解包括:抽象、SQL查询路径以及优化路径在内的方法和技能;
2.熟悉hive、pig、python任意一种大数据处理语言;熟悉hadoop、sql、shell;
3.熟悉Oracle、SQLServer、DB2、MySQL等主流数据库及数据仓库的设计和应用;
4.熟悉Hadoop/Spark/NoSQL数据库等大数据技术;
5.有数据治理、主数据管理、数据挖掘等工作经验者优先考虑;
6.具有较强的责任心、执行力,有良好的沟通技巧和团队领导能力。
Education&ProfessionsCertifications:
教育背景和职业资质:
计算机、数据、统计相关专业本科以上学历;主要职责:
1.负责数据平台、数据仓库架构的规划与设计;
2.负责数据平台的整体数据架构设计,完成从业务模型到数据模型的设计工作,熟悉业务模型分析及转换,具备较强的业务理解和业务抽象能力,善于从复杂现象中抽象根本问题,分析根本原因,并形成最合适的快速解决方案;
3.负责根据业务功能、业务模型,进行数据库建模设计,具备大型企业级数据库模型设计能力,对能源类系统,元数据系统有非常深刻的认识和理解,能解决能源类系统数据价值应用的关键问题。
4.完成各种面向业务目标的数据分析模型的定义和应用开发,
5.负责数据平台的数据提取、数据挖掘及数据分析,具有良好的商业敏感度和优秀的数据分析技能,能够解决复杂的算法问题。
6.负责和各个业务系统之间的数据对接,把控客户各业务部门的数据需求;
7.带领团队成员一起完成数据应用工作的流程、规范和方法的建立。
岗位要求:
经验
1.8年以上IT行业工作经验,具有丰富的信息系统设计、实施经验;
2.具有5年以上企业级数据平台、数据仓库设计经验;
3.丰富的数据架构规划、数据建模、数据库设计以及程序设计、开发经验;
4.丰富的数据解决方案或数据架构(数据仓库、数据集成、数据管理)构建经验;
5.丰富的基于开源技术的提供大数据解决方案的经验;
6.熟悉常用的分析、统计、建模方法,熟悉数据仓库相关技术,如ETL、报表开发,熟悉分布式计算的设计,了解在能源企业从数据化到决策分析过程中会遇到的各种问题,并有过实战经验。
Skills&Competences:
技能和能力:
1.深入了解包括:抽象、SQL查询路径以及优化路径在内的方法和技能;
2.熟悉hive、pig、python任意一种大数据处理语言;熟悉hadoop、sql、shell;
3.熟悉Oracle、SQLServer、DB2、MySQL等主流数据库及数据仓库的设计和应用;
4.熟悉Hadoop/Spark/NoSQL数据库等大数据技术;
5.有数据治理、主数据管理、数据挖掘等工作经验者优先考虑;
6.具有较强的责任心、执行力,有良好的沟通技巧和团队领导能力。
Education&ProfessionsCertifications:
教育背景和职业资质:
计算机、数据、统计相关专业本科以上学历;
篇2:大数据架构师岗位职责及相关职位要求
大数据架构师职位要求
1.计算机、工业自动化等相关专业本科及以上学历。
2.熟悉数据仓库建模理论,3年以上相关领域实践经验,能够独立完成系统架构。
3.熟悉Hadoop、Hive、Spark等大数据技术。
4.熟练使用Java或其他语言进行复杂业务逻辑的数据处理工作,具备海量数据处理以及性能优化的能力。
5.熟练MySQL、Redis、HBase等数据库,能够完成存储查询的优化。
6.思路清晰,具备良好的沟通能力和理解能力,较强的学习能力以及快速解决问题的能力。
7.对新技术,新事物有很好的探索和求知欲。
大数据架构师岗位职责
1.负责大数据项目技术架构评估与设计。
2.负责关键功能的开发,技术难题的解决,以及输出代码的关键把控。
3.负责对使用关键技术的预研和选型,完成PoC。
4.负责大数据平台新技术的开发使用和性能优化,测试。
5.能够带领团队完成项目开发工作,并能分享技术经验。
6.研究主流技术,能够应用于产品,推动产品功能、性能的提升。
篇3:数据架构岗职位描述与岗位职责任职要求
职位描述:
数据架构岗(1名)
1.岗位职责:
(1)理解公司业务对数据的需求,根据业务需求制定技术设计方案,主导数据应用系统的架构设计和核心技术攻关;
(2)负责数据挖掘领域的工作,参与数据挖掘及数据产品项目的规划、设计和实施;
(3)负责跟踪机器学习、人工智能领域技术在金融行业的应用趋势,进行技术,促进数据分析与应用能力提升。
2.能力要求:
(1)计算机、数学或物理相关专业,硕士及以上学历,3年以上数据架构设计经验,有金融行业数据架构设计经验者优先;
(2)作为核心团队成员参与过数据挖掘或机器学习项目,有实际项目经验者优先考虑;
(3)能够将机器学习、深度学习技术与金融应用场景进行结合应用,并能灵活的解决实际问题;
(4)熟悉数据挖掘过程,具备使用成熟数据挖掘模型完成数据抽取、数据处理、数据建模及验证、数据分析报告等能力;
(5)熟练掌握python、Java、R等一种或者一种以上的开发语言,了解Hadoop和Spark者优先;
(6)诚实正直,工作责任心强,具备良好的团队合作意识,以及良好的沟通能力,积极上进,能够承担压力、接受挑战。
微信
篇4:实时数据库(时序库)研发架构师职位描述与岗位职责任职要求
职位描述:
你会在公司担任什么?
1、负责大数据平台的搭建工作及实时处理流程的设计;
2、负责实时开发相关组件的开发、维护和优化;
3、负责相关文档和代码的编写;
4、上级主管委派的其他任务。
我们需要怎样的你?
1、要求深厚的技术功底,有数据库架构设计经验;
2、精通C开发,5年以上C开发经验;
3、熟悉开源InfluxDB、OpenTSDB、TimescaleDB、Druid等时序库,掌握开源时序库底层代码架构;
4、对大数据平台有一定的认知,熟悉大数据相关技术知识;
5、具备一定的管理经验,熟悉技术管理体系。
我们可以给到你什么?
1、周末双休,节假日也休,非常有竞争力的工资、餐费补贴哟;
2、高大上的办公环境;
3、生日福利+吃货福利....大小福利享不停;
4、每月财务姐姐8号发工资;
5、在这里,你将逐步独立负责项目的开展,获得满满职场力;
6、表现优异的宝宝可提前转正。
【福利待遇】
-基本薪酬:富有竞争力的基本薪酬,每9-12个月有一次调薪机会;
-奖励福利:包含但不限于年终奖金,同时享有加班补贴等;
-五险一金:员工入职即按国家及地方政府规定缴纳社会保险(养老、医疗、工伤、失业、生育)及住房公积金;
-带薪假期:周末双休、各种法定假期(国家法定节假日、带薪年假、婚假、产假及陪产假等),还提供带薪病假;
-员工活动:暖心生日会、美味下午茶、部门聚餐、年度旅游和团建活动等;
-内部晋升:每一年有内部晋升的机会。
备注:
1、周末双休,上班时间为周一至周五:8:30-12:00,13:30-17:30;
2、此为南方电网第三方合同制岗位;
篇5:数据架构师(杭州北京)职位描述与岗位职责任职要求
职位描述:
工作职责:
1、交流和理解客户业务需求,将需求转化成对数据加工生产的要求;
2、深入理解行业数据,理解和提炼标准,结合数据的技术特点设计数据模型和加工生产逻辑
3、对数据处理过程中的问题进行准确的分析和定位
4、负责包括数据标准在内的项目相关的技术文档的输出;
5、针对数据项目的实施和运维要求,对人员进行组织架构定义,职责分工以保障项目交付
6、作为技术专家,向客户进行项目方案汇报沟通;
任职资格:
1、深入理解数据治理的方法,具备数据仓库建设经验,包括数据清洗、ETL、质量监控和评估等实施经验
2、具有行业数据标准梳理的能力,对行业领域数据模型和标准有深入了解
3、熟悉行业典型数仓的建设过程
4、具备建模能力,熟练使用UML等,准确表达需求和设计
5、对数据的可视化展现有深入认识和理解
6、掌握各类数据库的使用场景,包括常见的关系型数据库、NoSQL数据库、MPP数据库等
7、熟悉大数据离线计算和流式计算平台,理解大数据平台的分布式架构特点
8、具有基于大数据平台进行数据开发的丰富经验
9、熟悉相关领域的业界产品和方案
10、具有很强的沟通能力和技术文档撰写能力