数据仓库高级研发工程师职位描述与岗位职责任职要求
职位描述:
工作职责:
1.负责参与制定数据仓库设计与开发规范
2.设计和开发数据产品和工具,负责相关业务数据需求的开发
3.负责参与建立数据质量与数据安全保障体系:包括相关工具开发,数据开发流程的权限管理和控制
任职资格:
1.具备丰富的数据仓库理论和实践经验
2.熟悉shell,python,hivesql编程,有丰富的sql查询优化经验
3.具备电商业务解能力,有较强的逻辑、概率思维能力以及数学建模能力,善于分析、归纳、解决问题背景,并对业务逻辑有兴趣者优先
4.有互联网数据研发、海量数据处理分析、OLAP项目开发经验者优先
篇2:数据仓库研发负责人职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责今日头条的一条或多条核心产品线的数据仓库建设,例如,火山,抖音,西瓜,国际化,问答等;
2、参与数据治理工作,提升数据易用性及数据质量,与数据工具团队紧密合作
3、深入业务,理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作。
任职要求:
1、精通数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景;
2、具备较强的编码能力,熟悉sql,python,hive,spark,kafka,storm中的多项;
3、善于沟通,具备优秀的技术与业务结合能力;
4、有PB量级数据处理经验者优先;
5、有团队管理经验者优先。
篇3:数据仓库研发工程师岗位职责
搜狗金融-数据仓库研发工程师-北京-02173(MJ001926)搜狗北京搜狗科技发展有限公司,北京搜狗科技,搜狗,搜狗科技,搜狗翻译,搜狗词典,搜狗岗位职责:
1、数据仓库、数据集市的数据模型设计
2、数据仓库ETL规则设计和开发
3、利用HQL进行数据清洗,根据应用场景建立数据集市。
4、数据仓库数据导入,建表,日常任务跑批,日志监控。
5、数据仓库需求调研和需求分析
任职条件:
1、熟悉python,熟练使用shell编程解决数据清洗;
2、熟练使用Hadoop、Hive、Sqoop,熟练使用hiveSQL并有一定编写map/reduce开发经验;
3、熟悉数据仓库建模理论,了解数据仓库数据分层架构,精通3NF和多维数据模型设计;
4、具备大中型数据仓库架构设计、模型设计、ETL设计的相关经验;
5、具备海量数据处理、有性能调优经、金融、电商、电信、互联网行业数据模型经验者优先
这是一款定位于服务平台互联网用户的金融产品,由搜狗公司内部孵化,深度挖掘搜狗在互联网端的用户规模优势以及多年的大数据能力积累。在当下大热的互联网金融领域,搜狗将发挥用户服务和智能算法优势,并结合平台的综合运营实力。