高级数据工程师岗位职责描述(精选30篇)
1、大学本科或本科以上统计学、数学或其他相关专业,对数据结构熟悉;
2、熟练使用python进行数据分析、处理、可视化。熟悉numpy/pandas/matplotlib等常用模块。熟练使用sql,最好用过hive-sql或spark-sql;
3、对hadoop/spark有一定了解。能够简单使用hadoop系列命令;
4、对线性回归,决策森林,xgboost,评分卡等数据挖掘相关算法有一定了解;
5、做过web接口调试,熟悉json者优先;
6、熟练掌握PPT和EXCEL制作;
7、具备良好的学习、沟通与表达能力,具有较强的团队合作精神,对工作富有热情,能承受工作压力;
8、有运营商或金融类相关数据经验工作优先考虑;
9、能适应中长期现场出差。
高级数据工程师岗位职责描述 篇16
1、参与数据仓库建设,负责数据仓库模型设计;
2、开发高质量可扩展的底层数据仓库体系;
3、负责数据仓库系统与业务系统的接口设计和确认工作;
4、负责数据平台相关的管理工作,如数据研发规范、数据质量及稳定性保证等建设;
5、参与公司各个业务线BI、数据产品与应用的数据研发,发觉数据潜在价值。
高级数据工程师岗位职责描述 篇17
1.负责海量数据的分析开发工作;
2.完成数据挖掘模型,跟踪模型的实施和效果,定期优化算法和分析策略,分析研究后提供建设性建议 ;
3.优化大数据存储、计算等各方面性能,确保能从海量大数据信息里,有效进行数据分析和挖掘;
4.根据用户的活动记录进行特征筛选和关联挖掘。提高关联准确性;
5.参与相关数据标准和规范的制定。
要求:
1.熟悉java/scala/python/R中至少一种编程语言,具有良好的.编码习惯;
2.计算机、数学相关专业本科以上学历;
3.2年以上数据挖掘及其相关经验,对常用的数据挖掘算法有较深入了解,有实际算法调优经验 ;
4.熟悉常用数据挖掘算法(聚类/分类/回归/关联规则/图模型)等算法原理,具备实际的建模经验,熟悉常用机器学习算法原理,如朴素贝叶斯/决策树/随机森林/逻辑回归/SVM等,并具备相关应用经验;
5.熟悉hadoop生态,具有spark/flink等实际开发经验;
6.极强的数据敏感度,能从海量数据中挖掘出数据核心价值,相关;
7.熟悉分布式存储,熟悉mysql/oracle、hbase、redis、mogongdb、elasticsearch等,熟悉neo4j/JanusGraph等图数据库优先 ;
8.富有创新精神,充满激情,乐于接受挑战,良好的沟通技巧和团队合作,抗压性强,能适应加班。
高级数据工程师岗位职责描述 篇18
1、负责大数据平台搭建及数据仓库建模;
2、负责数据库管理及数据优化;
3、利用大数据相关技术实现对数据的分析、挖掘、处理、及数据可视化等相关工作;
4、维护大数据平台并能解决相关问题,保障平台正常运行;
5、学习和研究新技术以满足系统需求。
高级数据工程师岗位职责描述 篇19
1、利用数据仓库建模及相关技术,参与数据仓库模型的设计。
2、参与企业级大数据仓库项目的落地开发。
3、参与企业级主数据管理项目的实施落地。
4、利用hadoop生态相关技术,负责大数据中心的'数据处理流程,包括数据清洗、融合、统计、挖掘等。
高级数据工程师岗位职责描述 篇20
任职要求:
1、软件、计算机、通讯等理工科相关专业本科及以上学历;
2、具有3年配置管理或产品数据管理经验;
3、熟悉计算机与网络管理;
4、熟悉配置管理与产品数据管理知识,熟练掌握svn、plm等数据管理平台的`操作与管理;
5、熟悉系统与信息安全知识;
6、具有较强的逻辑思维能力及良好的沟通能力,良好的主动学习能力及执行力。
高级数据工程师岗位职责描述 篇21
岗位职责:
1.参与金融大数据平台系统和算法的研发和优化;
2.基于大数据金融场景,进行信用风险模型,风控模型,营销模型的创新设计;
3.与业务部门沟通合作,将数据模型应用于实际业务。
任职要求:
1.计算机相关专业硕士及以上学历,至少7年以上相关工作经验;;
2.具有良好的商业敏感度和优秀的数据分析技能,能够开发创新而实际的.分析方法以解决复杂的商业问题。
3.熟悉机器学习的一般模型;例如分类.聚类.预测,理解一些常用的特征选择和矩阵分解算法。
4.熟悉深度神经网络和常用模型(如CNN,DBN,sparseconding,RNN等),有Caffe或Theano或ConvNet的实践经验。
5.在语义理解检索(如知识图谱表示.结构化预测.语义解析.信息检索.知识挖掘等)有过深入的工作与研究。
6.较强的自学能力.优秀的逻辑思维能力和良好的沟通表达能力和敬业精神。
7.具备良好的系统分析能力,良好的抽象思维和逻辑思维能力,独立分析问题解决问题的能力;
8.可承受较大压力,有责任感,较强的沟通协调能力,具有团队合作精神;
9.有互联网公司.大型金融企业和大型IT企业工作经历的优先。
高级数据工程师岗位职责描述 篇22
1.从事GIS数据制作、分析、数据管理等工作;
2.编写工作总结和作业流程等文件;
3.通过已经完成的矢量化成果和表格数据库入库和检查工作;
4.利用软件对图形和属性进行检查,并进行错误修改;
5.其他数据制作处理工作。
高级数据工程师岗位职责描述 篇23
1、针对具体的业务场景需求、定义数据分析及挖掘问题;
2、使用统计学分析方法、挖掘算法、构建有效且通用的数据分析模型,对数据挖掘方案进行验证、开发、改进和优化,实现数据挖掘的功能应用;
3、搭建高扩展高性能的数据分析模型库,作为数据分析团队的基础工具;
4、完成领导安排的其他工作。
高级数据工程师岗位职责描述 篇24
相关文件的定义和编写
2.生产良率和抛料率的监控和改善
3.生产异常的分析解决
4.技术人员的班别安排
5.设备保养的'安排和作业follow
6.设备故障维修&coordinator
7.配合新产品导入或者其他需求的试产验证
8.主管交付的其他事项
高级数据工程师岗位职责描述 篇25
岗位职责:
1.负责衔接大数据平台与前端的数据传输;
2.根据客户需求设计大数据业务平台架构、配置组件;
3.负责后台服务的调试与测试,梳理接口文档、开发文档与测试文档。
任职资格:
1.硕士以上,或较为优秀的本科生;后端开发经验2年以上;
2.有基于b/s架构进行实际业务平台开发的经验,有to b软件开发经验更佳;
3.通用软件开发基础、软件架构基础、scrum敏捷开发方法,有大数据基础更佳;
4.精通java或python语言,有rcp框架经验更佳;熟练掌握mybatis、springcloud / springboot、node.js等框架,精通sql技术;了解以太网通信协议,熟悉websocket技术。熟练使用git,svn等工具;
5.学习能力强,勇于挑战,代码质量意识强,笃信“工程即魔法”。
高级数据工程师岗位职责描述 篇26
1.针对用户行为预测业务,负责用户画像、订单特征体系建设,包括离线数据产出以及服务化;
2.针对用户端上行为产出的实时数据流,挖掘实时特征并服务化;
3.针对客服场景,挖掘实时用户行为异常以及进线异常;
4.针对智能客服场景用户标签挖掘,人群挖掘等工作,支持智能运营方向的业务;
5.负责开发并维护智能客服业务的特征服务系统。
高级数据工程师岗位职责描述 篇27
1.依据项目需求建构数据萃取与转换流程
2.挖掘数据特征,进行数据和特征融合
3.搭建数学模型,并对模型进行检验评估
职位要求:
1、计算机、数学、统计、人工智能等相关专业的硕士或以上学历;
2、二年以上数据挖掘、机器学习相关工作经验,熟悉python、spark、pandas、sklearn等数据分析工具者优先;
3、熟练掌握贝叶斯、随机森林、深度学习等机器学习算法;
4、突出的分析问题和解决问题能力,自我驱动,并且具备较强的学习能力、创新应用能力及沟通协调能力,有良好的'团队合作意识;
5、有国际背景或能熟练使用英文沟通者优先
高级数据工程师岗位职责描述 篇28
1、负责公司与阿里巴巴在新行业方向(新金融、新零售、国内外运营商)的产品研发;