天天范文

位置:首页 > 文秘 > 岗位职责

数据仓库工程师岗位的工作职责(精选15篇)

数据仓库工程师岗位的工作职责 篇1

职责:

数据仓库工程师岗位的工作职责(精选15篇)

1. 负责数据仓库建设、设计、优化和落地

2. 负责数据ETL任务开发及日常维护

3. 对数据ETL任务进行性能调优及性能瓶颈分析

4. 学习新技术,提高整个平台的计算能力和效率

任职要求:

1. 计算机相关专业,全日制本科及以上学历,2-5年工作经验

2. 熟悉数据仓库理论基础,对数据模型建设、应用层建设有比较丰富的经验

3. 熟练使用 SHELL或PYTHON

4. 熟悉HADOOP相关的大数据技术:HDFS, MAPREDUCE, HIVE

5. 能对HIVE进行性能分析及调优

6. 有MAPREDUCE开发经验优先

7. 良好的沟通能力、组织协调能力、应变能力, 极强的责任心、学习能力。

数据仓库工程师岗位的工作职责 篇2

职责:

1 负责大数据平台、数据仓库多维模型设计

2 负责大数据平台相关生产系统数据的抽取、清洗、转换等工作

3 负责BI平台设计与报表开发工作

岗位要求:

1、精通数据仓库建模理论,有参与过2个以上的数据仓库建设经验;

2、精通ETL开发,熟悉数据的抽取、常用数据脚本编写、存储过程的编写;

3、熟悉BI平台,有数据报表设计和开发经验;

4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一种主流关系数据库;

5、具备良好的团队协作精神,良好的沟通能力;

6、供应链、物流行业数据从业经历者优先。

数据仓库工程师岗位的工作职责 篇3

职责:

参与数据仓库模型设计和开发工作;

负责建立数据分析模型,设计前端报表,数据可视化开发;

负责数据平台项目数据仓库的管理、性能监控及优化等;

负责数据平台的日常运维及优化

职位要求:

大学本科以上学历,3年以上工作经验,包含2年以上数据仓库开发工作经验;

精通数据仓库建设,熟悉常用的模型设计方法;

对数据可视化有丰富的经验,熟悉常用的数据分析方法;熟悉至少一种报表工具开发;

精通数据仓库领域知识和技能,包括元数据管理、主数据管理、数据质量管理等;

熟练使用ETL工具如Kettle、SSIS等进行数据清洗、转换、整合;

熟悉至少两种关系型数据库,如Oracle、SQL Server、PostgreSQL、MySql等主流数据库,精通SQL Server开发和运维者优先考虑;

有完整的数据平台建设经验者优先;

熟悉使用Linux系统及Shell脚本开发,熟练开发Python程序者优先;

熟悉大数据开发框架者优先,如Spark,Flink等;

对新技术好奇爱学习,主动性和责任心强,对数据敏感,逻辑性强,有良好的抗压能力;

团队协作能力强

数据仓库工程师岗位的工作职责 篇4

职责:

1、参与据仓库的长期架构规划,与数据开发,建设共享大数据平台;

2、负责数据平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地;

3、负责来自业务团队数据需求的研发支撑;

4、大规模数据挖掘和机器学习算法的实现和维护;

5、在线和离线海量数据分析平台的开发;

6、负责数据仓库的建设和维护,包括需求调研分析、软件规划、概念模型、设计逻辑、物理模型、数据处理(抽取、清洗、转化)、项目实施管控等;

7、负责制定数据接入和采集规范制定。

任职要求:

1、从事数据仓库领域工作2年以上;

2、熟悉数据建模、ETL设计与应用、报表开发等,并有实际模型设计及ETL开发经验 ;具有良好的编程习惯和文档编写习惯;

3、熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等;

4、掌握大型数据库开发技术,如Oracle、Teradata、DB2、Mysql等等掌握至少其中一种,灵活运用SQL实现海量数据ETL加工处理;

5、了解大数据基础架构和平台 ,具备相关产品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)项目应用研发经验,有MapReduce开发的实战经验者优先考虑;

6、熟悉linux系统;

7、熟练掌握python语言;

8、熟悉数据可视化的基本方法,有数据可视化的开发经验优先;

9、对数据敏感,具有良好的逻辑分析、责任心强、良好的对外沟通和团队协作能力

数据仓库工程师岗位的工作职责 篇5

职责:

1、基于互联网行业特点构建企业级数据仓库架构,建设PB级共享数据平台;

2、负责数据平台相关数据研发及管理工作,参与制定EDW相关规范并推动实施落地;

3、对海量数据处理的相关需求进行评估及方案设计;

4、负责数据产品如用户画像等模型设计;

5、了解行业前沿大数据处理方法。

任职资格:

1、8年以上数据仓库开发及管理经验,5年以上互联网/电商行业经验;

2、精通数据仓库建设方法论,有大型数据仓库建设项目经验(PB级以上);

3、熟悉HADOOP、HIVE、HBASE、SPARK、FLUME等工作原理;

4、精通HiveSQL,有较丰富的HiveSQL性能调优经验;

5、至少熟练使用Shell、Python、Perl等脚本语言之一;

6、工作认真、负责,有良好的团队合作精神,良好的分析及沟通能力;

数据仓库工程师岗位的工作职责 篇6

职责:

1、协助研发自动化运维平台,提高运维、开发实施协作效率,规范操作流程;

2、协助研发基本服务组件,虚拟化;

3、评估主机、系统运行状态及性能,编写主机硬件架构方案;

4、快速准确汇报系统中出现的故障,配合相关人员做好系统升级,故障解决和测试等工作;

5、作好工作记录,定期汇总并上报给负责人。

任职资格:

1、计算机相关专业,大专及以上学历,三年以上服务器运维经验;

2、熟悉主流Linux/Windows服务器系统(CentOS/Redhat)日常安装配置维护能力,熟练常用命令编写;

3、熟悉Java应用,能完成Java应用的部署及常见运维工作;

4、熟悉Nginx、Lvs等软件负载均衡方案,能进行部署和排错;

5、熟悉Mysql数据库的管理,熟悉Mysql备份和恢复,熟悉Mysql主从同步复制及性能调优者优先 。

数据仓库工程师岗位的工作职责 篇7

职责:

1、参与数据仓库架构设计、建模和ETL开发;

2、参与数据治理工作,提升数据易用性及数据质量,与数据工具团队紧密合作;

3、理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作。

任职要求:

1、计算机、数学、统计相关专业专科及以上学历,其中2年以上数据仓库开发经历;

2、精通数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景;

3、具备较强的编码能力,熟悉sql,python,hive,spark,kafka,storm中的多项,有至少TB以上级大数据处理经验;

4、对数据敏感,认真细致,善于从数据中发现疑点;

5、善于沟通,具备优秀的技术与业务结合能力。

6、有电力行业经验者优先

数据仓库工程师岗位的工作职责 篇8

职责:

1、充分了解项目需求和设计,与开发人员配合,对整个数据库进行高效的设计与规划;

2、数据库端代码编写(存储过程、函数、视图等),与应用系统对接。

3、熟悉Memcached、Redis等分布式缓存技术,能够根据业务需求,合理的设计缓存方案;

4、数据库数据库系统的规划、设计、管理、变更、迁移;

5、熟悉数据库的性能优化、SQL调优,熟练使用高可用、读写分离、负载均衡等解决方案;

6、数据库架构搭建、日常维护、备份、优化及恢复;

7、能制定数据库开发的规范,并提供针对开发人员的SQL培训。

其他要求

1、3年以上数据库相关工作经验;

2、熟悉数据库的运行机制和体系架构、数据库备份与恢复原理;

3、精通数据库的管理、编程,2年以上专职MS SqlServer数据库管理经验;

4、具备良好的沟通能力及团队合作精神,能承受一定的工作压力;

5、有基于云数据库的管理和开发经验;

6、有实际运营项目开发经验、Memcached、Redis缓存技术等经验优先;

数据仓库工程师岗位的工作职责 篇9

1.熟悉娱乐系统的基本功能: 导航,语音,在线音乐, 收音机,蓝牙,WIFI,HUD,无线充电,车辆控制及设置,系统设置,倒车影像&360

2.娱乐系统全功能测试用例开发为主

3.全功能测试

4.娱乐系统实操测试

数据仓库工程师岗位的工作职责 篇10

职责:

1、根据业务部门需求进行数据的处理、分析、导出和日常维护;

2、结合公司的业务,进行一些自动化数据处理脚本的开发;

3、完成相关文档的编写。

职位要求:

1、熟练掌握SQL语句,能够运用SQL进行各种数据处理;

2. 熟悉Postgresql、Mysql、Oracle、HIVE 或其他数据库中的一项或几项;

3、熟悉shell或python编程,能够用脚本进行数据自动化数据处理;

4、具有良好的沟通能力和业务理解能力;

5、有过kettle,powercenter等ETL经验加分;

6、有数据挖掘分析能力加分。

数据仓库工程师岗位的工作职责 篇11

1、对旅游行业客户需求分析,制定旅游行业市场策略和方向;

2、针对不同项目特点和需求,负责完成解决方案引导,客户解决方案引导等工作。

3、与市场销售人员一起,根据客户需求进行项目落地方案引导,产品方案引导,共同完成销售任务;

4、政府、旅游行业信息化建设、线上线下运营咨询、规划;

5、行业解决方案、产品资料编制和维护;

6、重大项目招投标技术支持

7、技术领域涉猎广泛,知识面广,并在某个领域有深入的了解,如智慧旅游、智慧城市,大互联网,多媒体,O2O等。

数据仓库工程师岗位的工作职责 篇12

职责:

1、维护分析集团软件数据库功能及故障

2、提取、转换集团软件数据

3、维护数据库功能的日常运行

4、协调软件开发

5、部门ERP系统的日常维护

6、部门安排的其他工作

要求:

1、计算机或数学专业,大专以上学历

2、有一年以上数据库实际相关工作经验,熟悉sqlserver,oracle中至少一种

3、不接收应届生,不接收实习生或学徒(有实际项目开发经验,并能够独立分析、解决、编程者不限)

4、男女不限,年龄不限

数据仓库工程师岗位的工作职责 篇13

职责:

1、存储、服务器、云计算售后技术支持工程师;

2、负责项目主机存储系统建设的实施方案设计、系统调试、系统测试;

3、负责主流主机、存储、备份设备的安装调试;

4、负责项目协调工作;

5、负责存储、云计算项目的售后技术支持;

6、负责设备的安装及调试。

任职要求:

1、熟悉主流Linux、Unix、Windows等平台及应用环境;

2、对存储、备份、容灾等领域相关技术具有深刻的理解;

3、有Vmware、Oracle、Symantec(BE NBU)、IBM ITM,TSM,WAS,MS AD等软件实施经验优先;

4、良好的沟通表达能力和职业操守,能严格自律;自我学习能力强,善于思考和分析问题;

5、有红帽证书者先考虑;能接受异地出差的优先考虑。

数据仓库工程师岗位的工作职责 篇14

职责:

1、负责IBM、HP、DELL等业界主流品牌的服务器安装配置及日常维护工作;

2、负责VMWare虚拟化平台项目实施及维护工作;

3、负责EMC、DELL等企业级存储及其SAN网络的安装配置及日常维护工作;

4、负责服务器集群拓扑及SAN存储网络部署;

5、解决实施工作中的技术难题,挖掘客户需求,提出针对性的解决方案;

6、编写各类维护文档,譬如:实施方案、实施报告、巡检报告、故障处理报告等等。

岗位要求:

1、计算机相关大专以上学历,3年以上IT运维或机房管理工作经验;

2、熟悉主流X86服务器(IBM/HP/华为)和存储的运维和管理;

3、熟悉思科、华为等主流网络设备的配置和问题排错;

4、熟悉vmware虚拟化架构技术,具有虚拟化的搭建和运维经验,对vmware的存储、灾备、网络、安全、升级、虚拟机管理、监控和性能等有深刻的理解;

5、有一定的信息安全实施经验,对VPN,防火墙,上网行为管理以及内网安全有深入理解和实操经验;

6、熟悉服务器运维及服务器架设,包括AD域,IIS,DNS、双机集群等各类windows服务器的配置管理;

7、熟悉openstack或者cloudstack任意一种平台的部署实施,有成功搭建或者部署经验优先。

数据仓库工程师岗位的工作职责 篇15

职责:

1、根据信息分析的结果挖掘基因变异与疾病之间的关系;

2、大数据分析信息提取解读;

3、优化和丰富解读数据库,提出制定,调整,优化数据处理方案;

4、 搭建遗传咨询的对外平台,负责大客户的遗传咨询培训;

5、搭建位点解读管理体系 。

职位要求:

1. 生物科学、医学等相关专业本科及以上学历;

2. 具有临床咨询师证书、遗传咨询师或相关培训证书的优先;

3. 具有报告解读经验者优先;

4.具有大数据挖掘经验优先。