天天范文

位置:首页 > 文秘 > 岗位职责

ETL工程师岗位职责优秀(通用13篇)

ETL工程师岗位职责优秀 篇1

1、参与数据平台相关应用项目的ETL设计、开发、维护工作;

ETL工程师岗位职责优秀(通用13篇)

2、参与ETL调度架构的开发优化工作;

4、与团队内部以及需求部门进行有效沟通,跟进项目进度以及解决相关数据问题;

5、完成上级主管分配的工作任务,并达到公司制度规定的考核要求;

6、参与Informatica服务工作,包括Informatica性能调优,服务的安装发布,及Informatica工具的相关培训。

ETL工程师岗位职责优秀 篇2

1、 参与数据平台的定义,规划,设计和项目监督;

3、 与技术部和基础设施团队协助,完成数据仓库的建设与推进;

4、 协助经理从技术层面完成所有的技术实施架构,包括hadoop大数据平台、数据仓库、数据模型、etl、olap、报表平台、元数据管理、主数据管理、分布式数据平台等;

5、 参与建立和维护技术规范、流程、文档,确保和项目需求保持同步;

6、 参与Informatica服务工作,包括Informatica性能调优,服务的安装发布,及客户现场培训。

ETL工程师岗位职责优秀 篇3

1.负责数据收集整理分析,对多种数据源进行深度分析,利用ETL工具或者开发程序完成数据抽取、清洗、转换、装载

2.负责ETL流程的优化及解决ETL相关技术问题,开发Kettle处理插件并能根据业务需求修改Kettle源码

ETL工程师岗位职责优秀 篇4

职责:

1、参与数据仓库建设,负责数据仓库模型设计;

2、开发高质量可扩展的底层数据仓库体系;

3、负责数据仓库系统与业务系统的接口设计和确认工作;

4、负责数据平台相关的管理工作,如数据研发规范、数据质量及稳定性保证等建设;

5、参与公司各个业务线BI、数据产品与应用的数据研发,发觉数据潜在价值。

岗位要求:

1.大学本科及以上学历,计算机、经济、金融、数学专业背景,有3年以上工作经验;

2.熟悉数据仓库建模理论,以及数仓数据层级关系,具备大型数仓逻辑模型和物理模型设计经验;

3.熟悉一种ETL开发工具(sqoop,datax等), 熟悉ETL开发实施流程和原理;

4.掌握CDH版的hadoop环境,掌握hiveQL,有调优经验;

5.有一定的编程语言基础,不限制于java,python,shell等;

6.有元数据管理、数据质量管理工作经验的优先考虑;

7.工作认真,负责,仔细,有良好的团队合作精神。

ETL工程师岗位职责优秀 篇5

职责:

1. 针对业务问题进行分析,深入了解业务需求,为业务部门提供数据支持;

2. 搭建业务分析模型或业务分析指标体系,统一数据指标分析口径;

3. 参与报表需求调研和需求分析;

4. 参与报表开发工作;

5. 参与ELT相关的设计方案和开发;

岗位要求

1.4年及以上BI开发经验;

2.熟悉数据仓库建模理论,有建模经验;

3.熟悉掌握SQL语言吗,熟悉PL/SQL编程,熟练掌握存储过程开发;

4.具有较强的业务理解能力,沟通能力;

5.熟悉常用ETL技术;

6.熟悉Hive、HBase、Spark等大数据者优先;

ETL工程师岗位职责优秀 篇6

职责:

1.参与传统数仓和大数据数仓日常开发工作;

2.参与大数据仓库设计、规划和开发;

3.参与日常工作的优化,提出建设性意见;

4.负责管理项目,负责板块内的资源协调、进度管理、交付管理;

5.参与数据仓库、数据集市体系架构的设计、规划与开发, 参与大数据、ETL开发,sql性能优化。

任职要求:

1.全日制本科,计算机等相关专业。3年以上数仓开发经验,有银行、金融从业经验者优先。

2.2年以上项目管理经验,具备PMP证书优先.

3.熟悉oracle/hive/spark,熟悉数据处理和性能优化,有UDF自定义函数、MR开发经验优先;

4.熟悉常用ETL工具,熟悉常用的Linux指令,熟悉shell/python任意一种脚本语言。

ETL工程师岗位职责优秀 篇7

职责:

1. 对信息化项目进行立项评估管理、跟踪项目执行进度与状态、项目过程变更管理、评估信息化项目上线后的实际产出效果;

2. 对接业务部门,对信息化需求进行需求调研、整理、分析、原型设计、评估需求合理性可行性,提出系统解决方案;

3. 对信息系统建设进行优先级及版本统一协调、规划;

4. 与跨体系开发团队、供应商对接需求、审核解决方案、管理项目/SR的执行情况、推动项目/SR的落地;

5. 统筹、指导用户完成验收测试及系统上线切换工作;

6. 完善信息系统建设相关的流程规范、并推动流程规范的实施。

任 职 资 格

1. 精通需求分析的方法;

2. 具备对需求合理性准确的把握能力;

3. 具备2年及以上的开发经验;有3年以上的需求分析经验;

4. 具备良好的项目评估、项目管理经验;

5. 具备快速理解业务,以IT角度对业务进行抽象的能力,善于理解和沟通,逻辑思维能力好;

6. 对新技术感兴趣,对新事物感兴趣,把握新技术前沿应用;

7. 至少5年以上同类工作经验。

ETL工程师岗位职责优秀 篇8

职责:

1、负责业务数据建模、数据分析及关键机器学习算法的设计与实现

2、编写算法设计各阶段的相关文档,撰写相关专利;

3、负责基于大数据平台的相关算法实现及优化

岗位要求:

1、本科学历及以上,计算机、医学统计或相关专业

2、数学基础扎实,在数据挖掘、机器学习算法研究有较为丰富的知识积累和一定的实际项目经验。

3、熟悉大数据存储与分析基础理论和算法,有智能数据挖掘系统开发经验者优先;

4、有医疗数据分析经验优先

5、乐于接受挑战,学习能力强,勤奋肯干,有责任心

ETL工程师岗位职责优秀 篇9

职责:

1.依据项目需求建构数据萃取与转换流程

2.挖掘数据特征,进行数据和特征融合

3.搭建数学模型,并对模型进行检验评估

职位要求:

1、计算机、数学、统计、人工智能等相关专业的硕士或以上学历;

2、二年以上数据挖掘、机器学习相关工作经验,熟悉python、spark、pandas、sklearn等数据分析工具者优先;

3、熟练掌握贝叶斯、随机森林、深度学习等机器学习算法;

4、突出的分析问题和解决问题能力,自我驱动,并且具备较强的学习能力、创新应用能力及沟通协调能力,有良好的团队合作意识;

5、有国际背景或能熟练使用英文沟通者优先

ETL工程师岗位职责优秀 篇10

职责:

根据管理决策分析的需求,负责数据库模型的设计,数据库结构优化及技术指导;

负责数据库运维自动化方面的研究和践行实施,确保数据库的配置管理;

负责设计和优化数据库建设方案,参与系统架构的规划、设计、实施;

负责数据库系统运维流程、开发规范和安全策略的制定;

负责分析和管理数据库的安全,监控对数据库的访问;

负责数据库备份与恢复策略制定,年度恢复演练的执行;

履行上级主管授予的其它职责;

岗位要求:

本科及以上学历,计算机或相关专业,5年及以上数据库运维的工作经验;

具备OCM证书或相当水平的资格认证。

精通数据库性能调优,SQL优化,服务器优化;

熟悉Oracle、MySQL数据库技术以及高可用系统的设计、配置和管理;

熟悉各种操作系统及各种平台下主流数据库系统的安装与日常维护;

熟悉Linux操作系统管理与维护;

具有良好的客户服务和团队合作意识,有较强的责任感和执行力;

具有较强的沟通表达、归纳总结的能力,良好的文档撰写能力;

具有较强的数据安全和保密意识;

ETL工程师岗位职责优秀 篇11

1、熟悉CNC加工经验,能看懂三视图;

2、有CNC架车、架机经验、了解3轴、4轴驾车内容、注意事项及其原理;

3、熟悉法兰克、兄弟、北京精雕等操作、调试系统,了解CNC相关刀具加工特性佳;

4、熟练运用UG编程软件、了解探针编程;

ETL工程师岗位职责优秀 篇12

1.负责公司内部员工电脑的技术支持(如解决网络、系统及硬件故障、病毒查杀、办公软件排错等)

2.负责公司各类终端机、打印机、扫描仪等外设的维护;

3.负责公司业务系统的维护及更新;

4.负责公司下属门店IT设备的安装、部署以及网络的开通和调试;

ETL工程师岗位职责优秀 篇13

职责:

1、参与数据ETL和数据仓库治理;

2、参与大数据分析和挖掘,个性化推荐等系统的设计和开发;

3、负责数据挖掘、自然语言处理及预测等相关模型、算法的设计与开发;

4、参与BI等系统基础数据支撑开发;

5、参与用户画像、用户行为评分、行业指数、销售预测等功能模块的开发;

6、参与爬虫等外部相关数据爬取。

任职要求:

1、熟悉概率论和统计方法;

2、掌握统计学习方法和机器学习算法者优先;

3、掌握JAVA,理解MapReduce开发思维,能独立开发分布式计算;熟悉Shell、R、MATLAB、Octive、Python等脚本语言或应用开发者优先;

4、熟悉关系型数据库MySQL等,了解NoSQL;

5、具备工程化思维,思考数据业务能够全面谨慎;

6、具备快速学习的能力和业务理解力,对数据开发有浓厚的兴趣,具备理解和整合算法的能力。