搜索数据挖掘高级研发工程师2378职位描述与岗位职责任职要求
职位描述:
岗位职责:
岗位职责:
1,参与和建设搜索数据(包括QueryLog)挖掘系统;
2,建立离线数据ETL流程体系,使得整个数据流转(抽取、转换、加载)变得更加高效、便捷;
3、负责和外部合作方对接,建立起OPPO移动互联网搜索数据准入规范和相关项目核心代码研发;
能力要求:
1、三年以上相关工作经验;
2、精通Java/Python语言,对数据挖掘有浓厚的兴趣;
3、精通MySQL数据库,具备mysql索引优化、查询优化、存储优化能力;
4、熟悉MapReduce和实时计算(Flink/Spark),有大规模数据分析和处理的经验;
5、优秀的分析问题和解决问题能力,对解决挑战性的问题充满激情;
6、有NoSQL数据库或者Hadoop/Hive等分布式计算方面背景优先;
7、有过著名搜索引擎离线或Dump相关研发工作的经验或有过开源社区代码贡献优先;
篇2:数据挖掘工程师职位描述与岗位职责任职要求
职位描述:
岗位职责:
1.数据清洗,低质数据识别;反作弊
2.海量数据管理,分析,特征提取
3.基于海量用户数据,研究用户行为,构建用户画像;
4.基于海量数据,挖掘数据间关系,构建知识图谱
任职资格:
1.本科或以上学历,计算机相关专业;数据挖掘、机器学习等方向优先;
2.基础扎实,编码过关,熟悉C++;熟悉常用的算法和数据结构;
3.熟悉Linux操作系统开发环境;
4.熟悉常用脚本语言:python、awk、perl等
5.有大规模分布式计算平台使用经验
6.有推荐系统、信息检索相关
篇3:数据挖掘职位描述与岗位职责任职要求
职位描述:
岗位职责:
1、海量大数据分析、数据挖掘,负责分析和评估数据质量,提升数据治理的水平并指导数据采集
2、负责数据分析、加工、清理、预处理等数据质量分析工作
3、能够熟练使用Python编程,掌握numpy、pandas、matplotlib等常用分析工具包
4、能针对特定的业务场景,从数据中建模,解决问题
5、善于撰写文档,善于积累和输出者优先
岗位要求:
1、本科及以上学历,计算机、数理统计、机器学习、人工智能相关专业毕业优先,基础功底扎实,硕士优先;
2、对oracle、MongoDb、hadoop,MySql、Redis熟悉优先;
3、熟悉hadoop生态系统内常见项目的使用(hdfs、hive、hbase、spark、storm、zookeeper、kafka、yarn等)
4、熟悉数据仓库领域知识和技能者优先,包括但不局限于:元数据管理、数据开发测试工具与方法、数据质量、主数据管理,可以灵活运用SQL实现海量数据ETL加工处理
5、具有团队合作精神,良好的沟通协作能力,善于分析问题本质并解决问题,善于学习,乐于
岗位要求:
1、本科及以上学历,计算机、数理统计、机器学习、人工智能相关专业毕业优先,基础功底扎实,硕士优先;
2、对oracle、MongoDb、hadoop,MySql、Redis熟悉优先;
3、熟悉hadoop生态系统内常见项目的使用(hdfs、hive、hbase、spark、storm、zookeeper、kafka、yarn等)
4、熟悉数据仓库领域知识和技能者优先,包括但不局限于:元数据管理、数据开发测试工具与方法、数据质量、主数据管理,可以灵活运用SQL实现海量数据ETL加工处理
5、具有团队合作精神,良好的沟通协作能力,善于分析问题本质并解决问题,善于学习,乐于