天天范文

位置:首页 > 文秘 > 岗位职责

数据仓库工程师的工作职责(精选12篇)

数据仓库工程师的工作职责 篇1

职责:

数据仓库工程师的工作职责(精选12篇)

1. 负责数据仓库架构设计与开发

2. 根据业务调研,设计信息模型与数据模型,负责大数据建模、ETL、数据产品及平台的设计与开发

3. 满足业务数据需求,设计面向业务的数据集市模型

4. 需求的沟通与数据开发项目管理

5. 基于Hadoop生态的程序设计、开发和维护

岗位要求:

1.熟悉SQL语言,至少熟悉Oracle、MySQL、SQL sever一种及以上

2.精通数据库系统(Oracle、SQL、mysql等):精通熟悉Oracle数据库体系结构,基础扎实;精通熟悉DataGuardRAC等高可用技术,能顺利的配置和管理dataGuard;精通熟悉Oracle的备份与恢复技术;熟悉SQL和PLSQL,能编写日常维护需要的脚本

3. 从事过数仓逻辑模型、物理模型设计与实施等工作

4. 有使用Hive、Hbase、kettle等相关应用经验更佳

数据仓库工程师的工作职责 篇2

职责:

1. 负责直播业务相关数据仓库的数据模型设计;

3. 参与数据仓库ETL流程设计、开发和优化,解决ETL过程相关技术问题;

3. 参与项目规划,数据采集设计,数据仓库开发,模型开发,报表开发等;

4. 总结数据仓库建模的方法,负责数据产品平台化和系统化;

任职资格:

1. 2年及以上的数据仓库/BI相关研发经验,对数据和业务敏感,有较好的数据模型设计能力;

2. 熟悉数据仓库各类模型建模理论,了解数据仓库数据分层架构,多维数据模型设计;

3. 熟练使用Hadoop/Spark/Hive/HBase/Mysql,有列式数据库/Kylin/ElasticSearch等经验者优先;

4. 有较强的编程能力和编程经验,至少熟悉Java/Scala/Python/PHP等其中一门编程语言;

5. 参与过大型数据仓库架构设计、模型设计、ETL设计,具备海量数据处理、性能调优经验;

6. 学习能力强,热衷开源技术,有团队观念,具备独立解决问题的能力;

数据仓库工程师的工作职责 篇3

职责

1.负责数据ETL开发,优化ETL流程设计;

2.负责数据质量问题的分析、跟进、解决,进行数据质量监测、校验和提升;

3.负责ETL开发实施文档的编写;

4.负责梳理公司数据仓库/数据集市数据清单、数据映射关系,优化现有数据仓库模型;

5.完善和梳理数据指标体系,完成和维护数据字典的工作;

6.参与数据标准的制定、数据标准管理和数据安全管理工作;

7.参与公司大数据平台的建设,包括Sugar报表或神策接口配置,用户画像标签体系的开发等

任职要求:

1.有shell或Python脚本开发经验;

2.有传统数据库SQL Server和MySQL,有存储过程编写能力;

3.熟悉Hadoop生态相关技术并有相关实践经验,包括但不限于Sqoop、Hive、HBase、Kylin等开发经验;

4.有kettle、azkaban或oozie工作流调度经验;

5.熟悉Hive SQL或Flink SQL的开发;

6.有数据仓库模型设计,有使用kafka+Flink Streaming实时数据处理经验优先;

7.有Sugar、神策或Tableau使用经验,有用户画像或客户召回标签工作经验优先;

8.对数据挖掘和机器学习有所了解,包括常用的机器学习算法和数据建模过程的优先

数据仓库工程师的工作职责 篇4

职责:

1、 参与数据仓库及ETL基础架构规划、安全规划制定;

2、 负责数据仓库及ETL的开发、测试和优化,并及时解决相关技术问题;

3、 负责相关数据准确性验证及报表等日常维护;

4、 报表性能优化:对存在性能问题的数据报表进行优化;

5、 数据运维:及时处理线上问题;

6、 完成上级交代的其他工作。

岗位要求:

1.计算机相关专业本科及以上学历,2年以上ETL开发或数仓相关工作经验;

2.熟练使用Oracle、MySQL、PostgreSQL等主流数据库,具有较强的SQL编写、优化能力,熟悉存储过程编写;

3.熟悉数据仓库数据处理流程,有一定的数据建模能力;

4.具有良好的沟通理解能力,能根据业务提出的需求,快速理解并落地实施;

5.有Kettle、Greenplum开发经验者优先。

数据仓库工程师的工作职责 篇5

职责:

1、负责数据源导入、清洗、集成等工作,优化ETL流程并解决ETL相关技术问题;

2、负责参与数据模型体系构建及数据主题设计和开发,数据仓库和业务数据集市的建设;

3、负责数据集市需求调研和需求分析;

4、基于阿里云Maxcompute,进行数据开发工作。

岗位要求:

1、3年或以上数据仓库开发和模型设计经验;

2、深入理解DW,BI相关的知识,包括:ETL、数据仓库、OLAP、多维数据模型等;

3、熟悉MapReduce、Hive原理;

4、精通SQL,能够熟练使用HiveSQL进行数据开发;

5、具有良好的团队协作精神和沟通能力,较强的逻辑思维,学习能力和解决问题的能力,可承担较大的工作压力;

6、熟悉阿里云大数据开发平台优先,如Maxcompute;

7、熟悉跨境电商及供应链业务优先。

数据仓库工程师的工作职责 篇6

1、根据产品图纸或实物,制定锻造工艺和锻模设计,实现稳定批量生产。

2、负责新产品开发、实施、产品实现的质量策划。

3、优化锻造工艺和模具设计,解决产品质量问题及现场生产问题。

4、根据产品要求对公司内部相关人员进行有关技术培训。

5、对热模锻设备熟悉与了解

数据仓库工程师的工作职责 篇7

1.负责焊装车间的相关技术问题解决,任务中质量、效率确认及安全控制(常规工作点审核),持续改善以提升质量和效率;

2.与客户进行确认后,进行质量技术文件(工作范围、作业指导书)的编制,培训组长及相关质检人员;

3.负责检验工具及设备管理,编制工具、设备使用作业指导书,同时负责监督检验人员对工具设备的使用和保管;

4.协助运营经理进行团队建设、员工培训及发展、员工关系及技能考核;

5.负责随时与客户更新质量服务进度,进行客户关系维护、提高客户满意度;

6.与运营经理保持良好沟通,准确传递并执行公司总部相关规定;

7.及时、定期反馈运营中所需的支持及问题,并持续改善、改进。

数据仓库工程师的工作职责 篇8

1、负责核心产品的方案设计,物料选型,原理图设计,BOM制作及PCB审评工作;

2、负责新产品射频电路匹配调试及性能调试,以及射频指标的验证工作,并能对产品的相关问题进行失效分析;

3、指导和协助其他部门的相关工作,解决产品的硬件及软件上的问题;

4、追踪产品各项进度,保证产品顺利量产,支持产线解决相关生产问题;

5、撰写相应技术文档,支持产品性能认证。

数据仓库工程师的工作职责 篇9

1、负责企业数据管理,规划,分析,架构 ,开发;

2、制定数据库监控、备份、容灾策略,确保数据库服务的正常稳定运行和应急响应;

3、负责数据库优化,完成数据库定时作业,表结构等的整理;

4、负责数据模型建立,并根据业务和系统需要对数据库进行划分;

5、全面了解企业系统及应用逻辑和相对应的信息流动体系;

6、负责日常数据库运维(问题处理,升级,维护,备份,数据转移等);

7、熟悉SQL和Oracle 和MySQL数据库架构设计,可针对系统和业务需要进行合理选型;

8、熟悉数据生命周期,并能带领团队实施Data Profiling, Cleaning;

9、熟悉Meta Data, Master Data相关项目;

10、负责公司服务器端虚拟化开发;

11、服务器集群建立;

12、配合研发工程师完成系统研发中数据裤和服务器层的配置、开发、优化;

13、负责搭建和带领DBA团队配合开发团队完成系统研发任务;

14、根据具体业务和部门需要,与IDC进行沟通、协助完成信息中心搭建;

15、负责数据中心不同环境服务器的整体规划和管理(具体管理、文档、沟通);

16、负责网络环境中AD域的规划、开发、管理,还包括服务器设置、配置和日常监控维护;

数据仓库工程师的工作职责 篇10

1、熟知油品各项性能指标,了解油品的润滑机理。

2、有油品培训、车辆、机械维修及售后服务实践经验者优先录用。

3、负责对公司销售人员及客户进行定期的润滑油知识培训。

4、配合销售人员到现场做油品技术咨询与服务。

5、负责客户来电询问的有关油品及相关技术的解答。

数据仓库工程师的工作职责 篇11

职责:

(1) 负责数据库体系建设,并根据业务需求,设计数据库结构,改进数据库架构,实施数据库分布式、集群、负载均衡方案;

(2) 负责数据库系统的运行、监控、管理、性能调优、问题跟踪等;

(3) 负责制定和实施数据库系统的安全策略,数据备份、迁移、灾难恢复;

(4)负责数据库新技术的探索;

(5) 负责数据库相关平台和工具产品的建设。

任职要求:

(1)计算机、软件相关行业,本科及以上学历;

(2)两年以上相关工作经验,熟悉数据仓库各类建模理论,具备大型数据仓库架构设计,模型实际和处理性能调优等相关经验;

(3)熟悉oracle、mysql、sqlserver等常用数据库,有丰富的数据库模型设计和优化经验;

(4)有数据仓库、BI、数据抽取等相关项目经验优先,掌握Informatica、DataStage、KETTLE、TASKCTL等ETL及调度工具者优先;

(5)熟悉linux常规命令与工具,至少熟练使用Shell,Python,Perl等脚本语言之一;

(6)性格积极乐观,态度踏实诚信,较强的语言表达能力;具备强烈的进取心,求知欲及团队合作精神。

数据仓库工程师的工作职责 篇12

职责:

1.设计并优化数据库物理建设方案;

2.制定数据库备份和恢复策略及工作流程与规范;

3.在项目实施中,承担数据库的实施工作;

4.针对数据库应用系统运行中出现的问题,提出解决方案;

5.对空间数据库进行分析、设计并合理开发,实现有效管理;

6.监督数据库的备份和恢复策略的执行;

7.根据等保相关要求对数据库进行版本升级、补丁修复、安全加固工作;

8.为应用开发、系统知识等提供技术咨询服务。

岗位要求:

1.通信、电子工程、自动化、计算机其相关专业;

2.掌握数据库技术的基本概念、原理、方法和技术;

3.能够使用SQL语言实现数据库操作;

4.具备数据库系统安装、配置及数据库管理与维护的基本技能;

5.了解数据库应用系统的生命周期及其设计、开发过程;

6.熟悉常用的数据库管理和开发工具,具备用指定的工具管理和开发简单数据库应用系统的能力;

7.了解数据库技术的最新发展。有相关数据库专业证书者优先;

8.具有严谨认真的工作态度,对枯燥作业有耐心。