天天范文

位置:首页 > 文秘 > 岗位职责

大数据开发工程师岗位的职责描述(精选19篇)

大数据开发工程师岗位的职责描述 篇1

职责:

大数据开发工程师岗位的职责描述(精选19篇)

1、负责异构数据系统和大数据平台的集成与融合;

2、负责数据挖掘算法的设计及对海量数据进行挖掘分析;

3、负责分布式数据仓库平台、海量数据批处理平台、实时数据处理平台等系统开发;

4、参与海量数据处理,业务数据体系的设计、数据统计、分析及数据建模;

5、参与数据平台各系统的性能分析与系统优化,不断提高系统运行效率;

6、完成领导交办的其他任务。

任职资格:

1、计算机及其相关专业,大专及以上学历。两年以上大数据应用经验;

2、具备实时处理框架的设计和开发能力,熟练掌握Storm、Spark streaming等大数据实时处理框架中的一种;

3、熟悉Spark 、R、Hadoop、Hbase、Hive、Elastic Search/Solr等相关技术;

4、熟悉Scala、熟悉Linux开发环境,能进行shell脚本的编写;

5、具有较强的逻辑分析能力,高度的责任心及团队合作精神;

6、具有实际大数据项目的成功经验者优先考虑。

大数据开发工程师岗位的职责描述 篇2

职责:

1、参与南方电网软件产品(项目)前/后台服务开发,要求高性能、高可用、高并发;

2、独立完成产品模块(项目)核心代码开发、业务代码开发、系统性能调优等工作;

3、根据分配任务制定开发计划并按时完成相应模块的设计、开发和单元测试;

4、参与产品(项目)相关系统需求分析以及撰写相关系统设计文档;

要求:

1. 五年左右大数据研发岗位工作经验

2、丰富大数据开发经验:熟悉企业大数据常用技术,熟悉Spark、Flume、Hbase、Hadoop、Kafka,ES技术;

3、具有大型应用系统开发经验,具有分布式、高并发、高性能等架构经验,具有一定团队管理经验者优先;

4、了解J2EE技术平台及主流框架,具有SpingMVC、SpringBoot、Spring cloud、Mybatis、Redis等框架开发经验;

5、了解HTML5,CSS3,JavaScript,Ajax,jQuery等Web前端技术,熟悉jQuery、Bootstrap、AngularJS,VUE等主流前端JS框架中的一种;

大数据开发工程师岗位的职责描述 篇3

职责:

1、负责大数据ETL开发与维护;

2、负责大数据平台数据库的设计以及开发;

3、负责大数据计算框架的选型与计算流程的设计与开发;

4、负责数据服务的设计与开发。

任职资格:

1、本科及以上学历;

2、熟悉Flink、flume、jstorm、sparkstream、hive、spark等分布式开源软件,具备系统优化与性能调优能力者优先;

3、精通JAVA等面向对象编程,有分布式并行计算的开发经验优先;

4、熟练掌握至少一种MySQL、SQL Server、Oracle等关系型数据库或MongoDB、Redis等NoSQL数据库 ,有hive等数据仓库研发经验优先;

5、熟悉大数据、云计算概念,了解Hadoop、Hive、Hbase等大数据主流技术及开源框架者优先;

6、自学能力强,沟通能力较好,有一定独立分析,技术研究能力,具有良好的团队合作精神;

7、数据意识强,有较好的文档编写能力,以及踏实的工作作风。

大数据开发工程师岗位的职责描述 篇4

职责

1、负责大数据分析平台的建设,基于历史和业务实时数据构建数据挖掘模型;

2、根据需求设计和实现数据分析展示平台;

3、负责建立、维护和改进大数据分析流程、规范、方法;

4、负责基于大数据的数据分析算法研究,基于数据分析结果优化现有应用并探索新的应用。

任职要求:

1、本科及以上学历,统计、数学、计算机或相关专业/方向,3年以上数据分析、数据挖掘相关工作经验;

2、精通MATLAB、Python等大数据涉及的语言和工具,并能熟练运用相关数据分析工具实现数据分析方法;

3、对机器学习、数据挖掘算法及其应用有比较全面的认识和理解,熟悉主流数据挖掘框架;

4、熟悉分布式数据库、数据仓库和数据集市,熟悉数据库相关操作和编程;

5、具有优秀的发现、分析并解决问题的能力,积极性高,具有严谨缜密的工作习惯、较强的沟通能力及团队合作精神;

6、有旅游行业数据分析与挖掘从业经验者优先。有主导完成优秀应用、大型数据平台项目、有数据挖掘,算法设计等开发经验者优先。

大数据开发工程师岗位的职责描述 篇5

职责:

1. 负责相关项目的开发和维护,进行软件模块编码,确保安全、质量和性能;

2. 维护和升级现有软件产品,快速定位并修复现有软件缺陷;

3. 根据设计文档独立完成模块或项目的开发和测试。

4. 快速响应不断变化的需求。

任职要求:

1. 熟练掌握目前流行开源框架(spring/springmvc/mybatis)。

2. 熟练web开发和Java Script,熟悉并掌握目前流行的前端技术(jquery/Bootstrap/html5/css3)。

3. 对面向对象的软件开发思想有清晰的认识、熟悉掌握常用的设计模式;

4. 熟悉主流关系数据库Mysql、Oracle, 有sql调优经验。

5. 具有较强的责任心、能吃苦、良好的表达、沟通交流能力和团队协作精神。

6. 有良好的编程习惯,代码规范,善于整理开发文档,热爱技术。

大数据开发工程师岗位的职责描述 篇6

职责:

1、负责公司基础平台的自动化脚本搭建、优化及日常维护工作、系统集成测试

2、负责系统性能调优及系统异常的排查

3、负责监控体系部署和优化,参与公司网络、硬件、系统等层面的标准化及自动化工作

4、其他系统相关的日常维护工作

任职要求:

(一)基本要求

1、学历要求:本科及以上学历

2、专业要求:计算机或相关专业,较好的英文阅读能力

3、工作经验:2年以上自动化脚本开发工作经验

(二)技术要求

1、计算机相关专业本科或以上学历、2年以上运维工作经验,熟悉TCP/IP协议、Linux系统及内核相关知识;

2、熟练掌握运用1种以上的脚本语言,包括:golong,Shell、Python、perl等;

3、熟练Linux下常规软件的使用,如LNMP、LVS、NTP、DNS等,善于部署与优化;

4、能够熟练排查运维过程中出现的服务故障、系统故障、网络故障等;

5、熟悉KVM、LXC等虚拟化技术优先,有docker、K8S的运维经验者优先;

6、熟悉公有云、混合云、私有云,使用过阿里云相关中间件产品(EDAS、DRDS、MQ、OceanBase)者优先;

7、搭建自动化测试环境,同时能够承担部分软件测试工作。

(三)能力要求

1、熟练使用docker容器工具和linux系统命令

2、喜欢去看及尝试新技术,乐于分享,能有效的表达。

大数据开发工程师岗位的职责描述 篇7

职责:

1,负责业务系统的需求分析,相关数据库设计和对应的开发工作;

2,负责相关技术文档的编写;

3,解决开发过程中的关键问题和技术难题;

4,能按时,独立,高质量的完成工作,对自己的代码有严格的规范和质量要求

5,指导初级工程师的工作,负责相关的code review。

任职要求:

1,大专及以上学历,计算机相关专业;

2、5年或以上java开发经验,熟悉设计模式,熟练使用spring boot,Mybaits等主流JAVA开发框架;

3,能熟练使用git,maven等工具;

4,熟悉mysq数据库,能独立进行数据库的设计,并且有sql优化经验;

5,熟悉Redis,MongoDB等Nosql,并且能熟练的使用;

6,熟悉zookeeper,kafak,rabbitmq等中间件,并且能熟练的使用;

7,熟悉spring cloud,dubbo等微服务框架的基本知识和原理;

8,熟悉Linux的基本命令,对docker有一定的了解;

9,有良好的沟通能力,学习能力,适应能力,责任心。

大数据开发工程师岗位的职责描述 篇8

职责:

1.参与基于JAVA技术的应用系统开发;

2.参与需求分析,根据具体的模块需求,独立完成模块的设计编码工作;

3.负责所开发模块的故障修复、性能调优等;

4.根据开发规范与流程完成系统设计、编码、测试以及相关文档的编写;

任职要求:

1.计算机相关专业本科及以上学历,3-5年以上Java开发经验

2.熟练掌握Java、HTML/Javascript/CSS,JSP/Servlet等JAVAEE相关技术,有vue相关经验更佳;

3.熟练掌握MySQL等数据库;

4.熟练掌握Tomcat等应用服务器、nginx等负载均衡软件;

5.精通MVC模式下的B/S开发,熟悉Spring/Springboot/SpringMVC/MyBatis等开源框架;

6.敬业、责任心强,良好的沟通能力。

大数据开发工程师岗位的职责描述 篇9

1.熟悉Spring MVC+MyBatis开发框架

2.熟练使用Mysql、Oracle等数据库

3.熟悉主流微服务开发框架,如Dubbo或Spring Cloud

4.了解Linux服务器基本操作

大数据开发工程师岗位的职责描述 篇10

1. 负责车载信息娱乐系统(IVI)的Android Framework开发工作

2. 负责满足车载产品功能对Framework更改的需求,可独立完成软件方案设计,编码和系统调试

大数据开发工程师岗位的职责描述 篇11

职责:

1、主要负责JavaWeb以及APP项目的前后端服务代码编写,参与产品的开发与设计

2、根据项目具体要求,承担开发任务,按计划完成任务目标;

3、配合系统分析人员完成软件系统及功能模块的需求调研与需求分析;

4、配合系统分析人员完成软件系统及功能模块的设计;

岗位要求:

1、大专及以上学历,计算机相关专业毕业。

2、熟悉Java SSM、开源框架,拥有2年以上经验;

3、熟练使用Java,Jsp,CSS,JavaScript等开发语言;

4、熟练掌握Weblogic、Tomcat、BOSS等应用服务器以及系统集群的配置经验;

5、熟悉ORACLE,MYSQL

6、有较好的团队合作意识和沟通能力。

大数据开发工程师岗位的职责描述 篇12

职责:

1.负责与客户之间的沟通协调,了解客户需求,撰写方案

2.支持元数据的管理、清洗和数据模型开发实现

3.基于客户需求,形成总结经验文档,完善公司数据报表平台功能

4.与客户业务部门沟通协调,沉淀行业知识,总结行业案例

5.协调与客户定期交流和沟通

技能要求:

1.了解主流报表工具,了解ETL概念,应用过ETL相关开发工具;

2.具备基本SQL技能,掌握MYSQL、Oracle数据库基础知识;

3.较强的沟通能力、学习能力、逻辑思维、独立解决问题能力;

4.能根据客户所处行业,进行行业知识、样板案例的分析和总结;

5.具备良好的抗压能力,能适应因工作所需的出差。

大数据开发工程师岗位的职责描述 篇13

职责:

1、参与概要设计,详细设计,并负责完成核心代码;

2、参与项目技术选型与架构讨论;

3、各类应用系统模块设计与开发,以及相关设计文档编写和整理;

4、指导其他初、中级软件工程师工作;

5、完成领导交代的其他工作。

岗位要求:

1.精通java语言,熟悉基本设计模式。

2.熟悉常用应用服务器产品,如Tomcat,熟悉Linux系统,熟悉Java应用的部署、配置、调试和测试,并能根据调试测试结果定位错误原因,找出解决方案。

3.掌握SQL语言,熟悉以下任意一种或多种数据库:SQL server、Oracle、MySQL,了解并能熟练运用其常见性能优化手段。

4.熟悉j2EE技术,精通struts、spring、hibernate,mybatis等开源框架,精通jquery等前端框架。

5.熟悉消息中间件,缓存,应用服务器等中间件,并有实际的项目应用经验。

6.掌握各类技术文档的编写和整理。

7.有设计,调试接口的相关经验。

8.对信息技术领域的新信息、新知识具有相当的敏感性,能够迅速更新自身的知识内容,能够在短时间内攻克技术难关。

9.具有很好的代码编写能力和良好的代码编程习惯。

10.具有公卫领域相关项目经验者优先考虑。

大数据开发工程师岗位的职责描述 篇14

职责:

1,负责设计产品的前后台技术框架;

2,承担系统的开发工作,改进框架,基础架构,持续优化服务;

3,承担关键项目的技术评审及总体设计,参与构建系统原型及关键技术问题的攻关活动;

4,控制产品设计质量,制定产品开发规范、指导或撰写方案、设计等文档;

5,在开发过程中发现并解决存在的问题,帮助团队持续改进开发效率。

职位要求:

1,计算机相关专业,有扎实的计算机理论基础;

2,5年以上PHP语言为主的大中型系统开发经验,熟悉PHP主流框架;

3,熟悉B/S结构系统分析及设计经验,有构建可伸缩、可扩展、高可用系统经验;

4,深刻理解Linux/Unix内存管理、线程/进程间通信、异步事件回调机制;

5,精通MVC/REST架构、模板引擎、中间件的原理与应用;

6,熟练掌握各种设计模式和面向对象设计原则,具备较强的模型抽象能力;

7,熟悉web开发,对HTTP协议有深刻理解;

大数据开发工程师岗位的职责描述 篇15

1、负责手游客户端的开发工作;

2、与项目组美术/策划人员深入沟通,准确实现开发需求;

3、和服务器工程师配合,实现客户端端和服务器的数据交互;

4、与测试人员配合,了解并解决产品中存在的问题,对产品细节能有很好的把握。

大数据开发工程师岗位的职责描述 篇16

职责:

1、负责公司业务系统的代码开发、调试与维护工作;

2、能够按照开发进度保质保量完成开发任务;

3、对自己的代码负责,能够做好代码自测;

4、能够积极主动发现问题,解决系统bug.

岗位要求:

1、本科及以上学历,计算机专业优先考虑,从事相关工作2年左右;

2、有JAVA开发经验;

3、Java基础扎实,熟练使用SSH等主流JAVA框架,熟悉mysql数据库;

4、具有良好的团队合作能力,沟通能力强,较强的责任心和抗压能力。

大数据开发工程师岗位的职责描述 篇17

职责:

1、完成软件的设计、开发、测试、修改bug等工作。

2、撰写相关的技术文档。

3、参与业务需求的沟通,功能模块详细设计,业务功能实现与单元测试,系统维护等工作。

4、对代码质量如执行性能、可读性、可维护性负责

5、独立的解决和分析开发过程中的问题

6、完成上级安排的其他临时性工作。

岗位要求:

1、计算机相关专业专科以上。

2、精通Java语言,熟练使用MyEclipse,熟悉Linux平台的程序开发。

3、熟悉面向对象编程原理,数据结构和算法基础扎实。

4、熟悉J2EE相关技术,掌握Spring、Spring MVC、Mbatis/Hibernate等常用应用开发框架。

5、掌握Web前端技术,熟悉HTML、CSS、JavaScript,有JQuery、Bootstrap、Vue使用经验者优先。

6、熟悉Mysql/Oracle等常用关系型数据库,精通SQL,能够对SQL进行优化。

7、了解分布式计算、NoSQL技术,有实际应用经验者优先。

8、有Spring Boot、Spring Cloud、Git、Redis、Java8等相关使用经验者优先。

9、思维敏捷,具备良好的表达能力和沟通能力,PMP/ACP/CSM优先。

10、工作认真负责,有强烈的责任感和吃苦耐劳精神,具有良好的团队合作精神,具有强烈的事业心和责任感。

大数据开发工程师岗位的职责描述 篇18

职责:

1、负责公司系统的数据库SQL性能优化工作;

2、根据公司业务需求,参与架构设计,给出数据库设计与优化方案;

3、把关上线SQL代码审核;

4、负责开发人员数据库方面的知识培养,提高整体开发人员数据库方面的能力;

5、持续改进数据平台服务架构,保证系统高性能、高可用性和高可扩展性。

任职要求:

1、2年以上的数据库开发经验,熟悉软件开发的基本流程和方法,java编程经验优先;

2、精通oracle/Mysql等数据库,熟悉unix或linux系统,精通pl/sql编程;

3、精通数据库存储过程、触发器、索引、表分区的编写与使用;

4、有较好的沟通技巧和责任心,良好的团队合作精神,具有较强的项目管理能力和协调能力,具有较强的技术文档整理、分析、撰写能力;

5、有Oracle 12C使用经验者优先。

大数据开发工程师岗位的职责描述 篇19

职责:

1、理解应用系统的架构,独立完成开发和测试工作,实现系统的功能模块;

2、编写项目和系统开发过程中所需的各类文档。

3、负责对复杂的脚本进行调优;

4、解决和完成上级制定的任务计划和临时任务。

任职资格:

1、计算机相关专业本科及以上学历,1年以上相关工作经验;

2、精通MySQL,oracle,DB2一种或多种数据库;

3、熟悉其中一种数据库、表空间、数据文件、表、字段、存储过程、视图、索引等数据库对象的运用原理;

4、有复杂SQL编写经验,能根据设计说明书进行数据库存储过程的开发。

5、具体良好的学习能力,工作积极主动,有责任心。