大数据工程师岗位职责职位要求
职责描述:
华为企业BG-大数据工程师
1、基于hadoop/spark/mppdb的大数据、数仓平台架构设计及开发工作
2、数据处理流程设计及开发
3、海量数据的采集、存储、管理、分析、建模
4、负责大数据、数仓平台的监控及优化,针对持续增长的数据提供相应的解决方案
5、负责大数据、数仓项目的疑难问题解决,性能优化
专业知识要求:
1、有3年以上相关岗位工作经历,或者非金融业的数据服务或信息数据管理工作经验
2、数学、计算机技术等相关专业
3、精通大数据(MPPDB、Hadoop)等相关技术,并精通Hbase/Hive/MR/Spark/Solr/storm/flink其中的任意3个组件技术。
4、至少精通主流数据库技术Oracle/PostreSql/MySQL/SQLserver中的一种,精通数据仓库理论架构,包括但不限于数据调度、ETL、元数据管理、数据监控;
5、精通1-2门开发语言(JAVA/Python/Scala/Shell)
6、具有比较突出的组织、策划、协调及沟通能力,有强烈的结果导向和客户导向。
岗位要求:
学历要求:本科
语言要求:不限
年龄要求:不限
工作年限:3-5年
篇2:大数据开发工程师岗位职责职位要求
职责描述:
岗位职责:
1、运用大数据分析工具和技术解决风险管理业务中遇到的实际问题与需求,如风险评估、成长评价等,包括对模型进行设计、开发、验证、测试、部署及监控、优化。。
2、基于海量用户数据和特征,进行数据质量检查、特征加工、数据清洗等,建立数据挖掘模型。
3、评估数据源的质量和价值,能结合业务需求和场景,从各种数据维度中挖掘数据价值,并设计不同的模型,应用于不同的业务场景中。
职位要求:
1.计算机、统计学相关背景,熟悉常用各类机器学习算法的原理(如逻辑回归、决策树、SVM、神经网络、随机森林、深度学习等);
2.熟练使用SAS、R、Python等至少一种分析工具;
3.熟悉大数据分析平台和工具,如Hive,Hadoop,Spark等优先;
4.有较强的逻辑思维能力、优秀的沟通表达能力及团队合作能力。
岗位要求:
学历要求:本科
语言要求:不限
年龄要求:不限
工作年限:5-7年经验
篇3:华为大数据工程师岗位职责职位要求
职责描述:
1.负责项目组数据挖掘、数据分析、数据建模工作,能够按要求、高质量地完成任务;
2.熟练掌握分析设计工具,按照规范的要求,编写设计文档;
3.按照设计功能,实现模块的代码编写和维护;
4.按照公司的规范进行编码,并对开发的代码进行单元测试;
5.负责项目开发过程中的技术攻关及运行中出现的技术问题。
任职资格:
1、3年以上数据仓库和数据建模经验,包括不限于:ETL、DW、OLAP、多维数据模型等;
2、一定的数据可视分析基础,熟练掌握PowerPivot、PowerBI等工具用于数据分析;
3、有SSAS方案的设计或开发经验优先;
4、熟练使用至少一款BI相关工具,包括Tableau,PowerBI,OracleBIEE,Qlik等等。
5、理解数据仓库和数据建模相关知识。
6、沟通能力优秀,勤奋好学,热爱数据工作;
7、良好的团队精神,工作负责,具有良好的职业操守。
8、本科以上学历学位,具备CET-4/6优先。
岗位要求:
学历要求:本科
语言要求:不限
年龄要求:不限
工作年限:3-4年经验
篇4:华为大数据治理工程师岗位职责职位要求
职责描述:
1.参与客户大数据治理及管理工作,包括设计数据模型、定义数据标准、构建数据管理体系(元数据、主数据、数据质量等)等。
2.参与大型数据治理项目实施,对技术解决方案进行评估及审核,并给出符合数据架构规范的建议,与生态合作伙伴共同保证项目顺利落地。
任职资格:
1.具有数据模型分析设计、数据仓库建设和数据集成经验。
2.拥有大型客户数据治理或咨询经验。
3.熟悉主数据、元数据、数据质量等企业数据治理相关的体系和方法。
4.有金融、政府或公安行业项目经验优先。
岗位要求:
学历要求:本科
语言要求:不限
年龄要求:不限
工作年限:3-4年经验
篇5:Java大数据工程师岗位职责职位要求
职责描述:
岗位职责:
1、负责大数据挖掘与数据算法实现;
2、负责网络业务智能诊断课题任务。
岗位要求:
1、2年以上数据分析、数据挖掘及模型开发经验;
2、熟练掌握至少一门语言(Java、Python、R、Scala)进行挖掘和分析;熟练掌握数据分析工具(SAS、SPSS、R、Python),对数据进行快速验证和分析;
3、熟悉常用的数据挖掘和机器学习算法(决策树、逻辑回归、SVM、贝叶斯、神经网络等);有大数据并行处理分布式计算经验,熟悉Hadoop/Hive/Storm/Spark等;
4、熟悉数据可视化相关理论,有数学建模经验优先。
工作地点:福州
岗位要求:
学历要求:本科及以上
语言要求:不限
年龄要求:不限
工作年限:经验1-3年