大数据开发工程师的主要职责（通用19篇）

大数据开发工程师的主要职责 篇1

职责：

1、负责公司大数据平台建设;

2、根据业务需求，制定数据仓库和数据分析平台的实施和持续更新;

3、攻克技术难关，保证大数据系统的稳定运行;

4、完成大数据产品的开发。

职位要求：

1、计算机相关专业全日制专科及以上学历，大数据相关经验;

2、熟悉Java或Scala语言，熟悉Spark，Hadoop，Kafka，Hive，HBase，ZooKeeper等大数据相关技术;

3、精通SQL语句并对Redis，Mongodb等NoSQL数据库有一定经验;

4、对于高并发、高稳定可用性、性能、大数据处理有过实际项目产品经验者优先;

5、责任心强，工作踏实，有团队协作精神，沟通能力强者优先。

大数据开发工程师的主要职责 篇2

职责：

1.负责公司环保大数据平台的架构与搭建;

2.负责需求分析，根据客户应用需求规划大数据平台架构;

3.负责将大数据平台部署至私有服务器群、私有云或公有云;

4.负责在企业内部进行数据平台原型开发与数据实时交互、存储性能测试;

5.负责与数据挖掘算法交互的架构设计与开发。

任职要求：

1.计算机相关专业，全日制本科以上学历;

2.具有3年以上大数据相关应用开发经验，有Java开发经验更佳;

3.至少熟悉一种流行的大数据编程框架，如Spark，Storm，Flink等;

4.熟悉大数据生态圈常用技术如RocketMQ，Kafka，Flume，Zookeeper等;

5.熟悉Hadoop安装、调试、发布配置应用，熟悉Linux操作系统更佳;

6.至少熟悉TIDB，MySQL，SQLServer其中一种数据库;

7.学习能力强，对技术有热情，关注技术发展方向;

8.具有工业物联网、智慧型环保项目背景者优先。

大数据开发工程师的主要职责 篇3

职责：

1、 负责基于Hadoop/Spark平台架构的开发、设计和布局 ;

2、 完成系统框架的设计和核心代码的编写;

3、 针对海量的用户行为数据进行统计、分析与挖掘，不断提高系统运行效率;

4、 负责对数据进行分析，为项目组提供大数据技术指导及分析手段支撑;

5、 负责大数据平台的性能监控和持续优化;针对需求提供大数据分析技术解决方案 ;

6、 大数据平台的运维工作，持续完善大数据平台，保证稳定性、安全性;

7、 熟练使用大数据ETL数据抽取工具;

8、领导安排的其他工作。

任职资格：

1、 3年互联网行业开发经验，计算机或相关专业本科以上学历;

2、 精通Hadoop大数据平台架构，具有扎实的Java/Python等开发语言;并可以开发高效可靠的代码;

3、 具有较强的数据分析、数据挖掘的能力;

4、 熟悉spark、Hive、storm等计算框架者优先，对分布式存储和计算原理有较深的理解;

5、 严密的数学思维、突出的分析和归纳能力、优秀的沟通表达能;

6、 个性开朗，对技术钻研好学、逻辑思维能力强，沟通能力优秀，有团队合作精神。

大数据开发工程师的主要职责 篇4

职责:

1. 负责机票酒店大数据项目的评估、设计及关键模块研发;

2. 参与公司大数据平台及联机分析系统的建设;

3. 机器学习算法讨论、评估及算法的最终编码实现;

4. 数据平台开发规范制定，数据建模及核心框架研发;

任职要求:

1. 本科及以上学历，计算机或数学相关专业，三年以上相关工作经验;

2. 掌握Java、Python、Scala等 中的一到两种语言;

3. 熟悉Mongodb、Hive、Hbase、Redis等NoSQL数据库开发和调优;

4. 熟悉数据相关开源框架和工具，如ZooKeeper、Spark、Flink、Impala、Kylin 等;

5. 对数据结构和机器学习算法有一定的了解;

6. 具有海量数据处理、数据挖掘、数据分析相关项目的工作经验者优先;

7. 有机票酒店等旅游行业数据开发经验者优先。

大数据开发工程师的主要职责 篇5

职责：

1、负责公司项目应用监测数据，分析软件大数据平台的代码开发;

2、负责大数据体系架构设计和应用产品的研究;

3、负责大数据平台及应用场景的构建、部署、测试;

4、编写软件研发相关技术文档;

5、编写产品研发相关任务单计划，阶段性代码、技术方案和软件产品及时提交至配置管理理库;

6、Spark程序的研发，sqoop脚本开发和商家用户行为等离线分析数据;

7、kudu，kylin等技术调研，编写软件研发相关技术文档;

8、SUNMI数仓设计架构以及ETL流程开发;

9、建立多维度，多体系的用户标签体系以及用户行为数据库。

岗位要求 ：

1、本科以上学历，4年以上?工作经验，2年以上Hadoop平台的相关研发经验，具有良好的需求分析，方案设计，架构设计，程序编写、测试能力;

2、熟悉J2EE或Python平台开发，有良好的Java或Python语言功底;

3、了解Linux/Unix操作系统，了解脚本编程(Shell/Python其中一种);

4、具备数据中心资源管理(YARN)、监控(ClouderaManage)、调度(Azkaban)等系统研发经验者优先，具备分布式系统研发经验者优先;

5、熟悉hadoop以及其?生态圈系统上的hive、hbase、sqoop、spark、spark-streaming等技

术，懂hadoop源码者优先;

6、熟悉Kylin有OLAP平台设计和开发经验优先;

7、具有应用大数据技术处理TB级以上数据的项目开发经验者优先;

8、有较清晰的代码编写规范，逻辑性强，工作态度认真，良好沟通能力和团队合作精神。

大数据开发工程师的主要职责 篇6

职责

1、负责网站开发、平台应用、移动后台设计编写;

2、参与相关页面的Web前后台架构设计、核心代码的编写及后台服务程序的研发和编写;

3、协助总架构师及部门主管测试和发布系统，准备相关的技术文档，协助解决各种技术问题;

4、进行详细设计、代码开发，配合测试，高质量完成项目;

5、按照项目计划，按时提交高质量代码，完成开发任务;

6、参与公司新产品研发。

任职资格

1、专科及以上学历，五年左右PHP开发经验;

2、熟悉二种以上PHP开发框架，了解设计模式;

3、熟悉MYSQL数据库设计和性能优化;

4、精通PHP语言，熟悉JavaScript,AJAX，JSON，XML等Web相关技术;

5、具备良好的代码编程习惯及较强的文档编写能力;

6、熟悉使用SVN版本控制;

7、严谨的逻辑思维，强烈的技术热情,善于合作,喜欢有挑战性的工作;

8、热爱互联网产品，工作态度积极，对产品细节敏感。

大数据开发工程师的主要职责 篇7

职责：

1.参与大数据平台搭建以及项目技术架构。

2.数据分析，挖掘，模型具体的产品化;

3.根据产品需求，分析编写和制定大数据相关解决方案

岗位要求：

1、计算机相关专业本科以上学历，编程基础扎实，有2年以上大数据开发经验

2、熟悉Hadoop生态和体系架构，熟悉Flink、Spark，Hive等常用开源工具

3、熟悉Flume，kakfa，scribe等日志收集体系

4、熟悉主流数据库(Oracle、postgresql、Mysql、Sql Server)中的1种及以上，有较好的SQL性能调优经验

5、有数据仓库ETL经验者优先

6、有用户行为日志采集、海量数据处理、数据建模方面经验者优先

7、有持续学习的能力;喜欢开源软件，乐于知识分享;对工作认真负责;可以独立承担较大工作压力

大数据开发工程师的主要职责 篇8

1、负责电商平台Android客户端研发工作，能独立进行产品开发和迭代工作;

2、将设计师的视觉设计工程化并高兼容度实现;

3、对已有代码进行优化和重构;

大数据开发工程师的主要职责 篇9

职责：

1、负责根据需求调研结果，进行功能设计、详细设计;

2、负责需求和设计过程中相关文档的编制;

3、负责核心代码的编码和单元测试;

4、对技术难点进行攻关，并负责知识发布和知识传递。

任职要求：

1、全日制公立本科以上学历，计算机相关专业;

2、有3年以上基于J2EE B/S结构软件的开发经验;

3、熟悉HTML、JavaScript、AJAX等相关WEB技术，熟练掌握JQuery类库;

4、熟悉Servlet、JSP、JavaBean、XML等知识;

5、熟悉spring、springMVC、mybatis框架;

6、熟悉数据库开发，熟悉ORACLE等;

7、有良好的学习能力、团队协作能力，主动沟通能力;

8、爱岗敬业，服从指挥，认真负责;

大数据开发工程师的主要职责 篇10

职责 ：

1、参与需求评审，根据需求分析报告和需求规格说明书主导技术方案。

2.负责项目的开发与维护，能独立处理和解决所负责的任务;

3.制定软件开发阶段的工作计划，协调开发、测试的工作,做好日常代码审查工作，保证项目的进度和质量。

岗位要求：

1、本科以上学历，5年及以上java语言开发经验; 编程基础扎实，精通JSP、Servlet等开发技术。

2、熟悉前端框架：如Easyui、Bootstrap等。

3、熟悉主流数据库：Oracle、MySQL等的应用系统的数据库设计、开发经验，熟练掌握SQL。

4、熟悉J2EE体系架构，熟悉Spring、Hibernate、MyBatis等主流开发框架。

5、有主流应用服务器，如Tomcat、WebLogic至少一种的部署配置及性能调试经验，熟悉使用svn,git版本管理工具;。

6、了解webservice、socketMQ等接口框架。

7、熟悉Linux系统常用命令;

8、能承受压力，个性成熟稳重，具备良好的沟通协调能力，工作积极主动认真负责，富于团队精神，具有良好的自学能力和独立解决问题的能力。

大数据开发工程师的主要职责 篇11

职责：

1、与项目经理沟通和确认某个模块的需求和实现方法。

2、负责自己范围内的功能代码编写

3、负责自己范围内的功能模块的单元测试以及阶段测试工作

4、对自己开发的功能模块进行维护工作

5、部分现场支撑问题解答以及处理

6、合理编制技术文件，改进和规范工艺流程;

岗位要求

1、计算机及相关专业本科及以上学历

2、2年以上大型互联网电子商务系统或者其他大型企业应用系统开发相关经验;

3、精通Java EE相关技术和框架

(包括Java语言基础/多线程/Spring/MyBatis/Cache/Workflow/zookeeper/dubbo等)

4、有Web及前端技术开发经验

(包括Javascript，ajax，jason，HTML，XML，MVC 类Web开发框架);

5、熟悉基于Mysql、Oracle等数据库的设计和开发、Linux操作系统和某种脚本语言编程(如Shell等)

6、熟悉大容量、高性能的数据库系统的应用开发，对各种开源的软件有深入的了解，

有1年以上的大规模高并发访问的Web应用开发经验;

7、熟悉企业应用设计模式、面向对象的分析和设计技术，包括设计模式、UML建模等

大数据开发工程师的主要职责 篇12

职责：

1、负责网站后台程序开发(PHP+Mysql)与网站运营人员、美工人员配合完成网站以及需求功能构建;

2、负责服务器的维护和保障安全运行;

3、WAP手机端网站的开发与维护;

4、负责网站安全监控与应急处理，维护网站使之保持可用性和稳定性;

5、根据项目任务计划按时完成开发任务。

任职要求：

1、计算机相关专业，至少1年以上的PHP开发工作经验，需要有微信小程序或微商城开发经验;

2、有过实际的电商网站开发和部署经验;

3、熟悉JS，PHP+Mysql等语言，能独立完成开发任务;

4、熟悉至少一种PHP框架，如CodeIgniter/ThinkPHP/ZF

5、熟悉主流第三方支付接口，如支付宝，微信开发;

6、良好的编程习惯，结构清晰、命名规范、代码冗余率低;

7、了解apache及apache配置，了解linux系统;了解IIS+PHP+Mysql配置;

8、会写移动端接口，会H5页面编写。

9、工作经验丰富者，

大数据开发工程师的主要职责 篇13

职责：

1.根据产品或项目开发进度和任务分配，负责相应软件模块的设计开发;

2.根据开发规范和流程独立完成模块的设计、编码及相关文档;

3.服务器环境的搭建和系统的部署等。

4.协助编写需求文档，编写概要设计文档、详细设计文档、数据文档等相关文档。

5.能够参与系统架构设计、性能优化、重构的讨论及给出解决方案的建议。

任职要求：

1、计算机或相关专业背景，大专以上学历,2年以上工作经验。

2、精通一种或多种主流的关系型数据库如Mysql、Oracle。

3、熟练使用java编程语言，有良好的编程风格。

4、熟悉java的基础知识，如数据类型、集合、异常处理、多线程、缓存、事务等。

5、熟悉一种或多种nosql数据库，如Mongodb、Redis。

6、熟练使用Spring、SpringMVC、Hibernate等常用后端框架。

7、熟悉linux等操作系统。

8、熟悉SpringBoot框架。

9、熟悉微服务架构。

10、熟悉数据结构、设计模式、UML等知识。

11、熟悉一种或多种消息队列如RocketMQ、Kafka。

大数据开发工程师的主要职责 篇14

职责：

1、负责公司产品的开发工作;

2、负责系统相关业务模块的设计与开发;

3、负责相关开发文档的整理与编写;

4、与前端配合开发公司APP以及其他项目;

任职资格：

1、大专及以上学历，两年以上 PHP工作经验，自学能力强;

2、至少熟悉一种数据库开发MySQL/SQL/ORCAL。 对数据库性能有开发、配置、维护、性能优化经验;

3、有打包封装APP开发经验(必须);

4、熟悉主流PHP开发框架,熟悉Laravel 优先。;

5、良好的沟通，理解和逻辑能力;

6、具有Web前端开发经验优先;

大数据开发工程师的主要职责 篇15

1、负责飞机结构工程管理、工程设计开发工作，并要求供应商严格按工艺、图纸、制度进行生产，确保产品符合要求

2、协助销售中心或产品经理开展结构专业技术支援工作

3、负责飞机结构的改装设计方案的评估、消化和建立设计能力等工作

4、负责客改货及VIP改装的改装包的技术消化

5、负责外委产品的工程技术指导

6、控制产品在供应商处的加工过程，积极配合、参与对不合格品的评审、处置、控制工作;

7、确保设计按照既定的民航规章要求和产品质量与质量体系要求。如欧洲民用航空局关于设计单位批准许可的所有各项要求

8、跟踪产品在外协供应商处状态，要求供应商严格按工艺、图纸、制度进行生产，确保产品符合要求

大数据开发工程师的主要职责 篇16

1、负责RightCloud CMP混合云管平台系统相关研发;

2、负责RightCloud CMP产品售前POC、生产环境的部署实施;

3、参与公司研发中心生产&测试各种环境及相关服务的日常运维，并保证其安全高效稳定的运行;

大数据开发工程师的主要职责 篇17

1、从事软件产品模块的功能设计、数据库设计工作；

2、从事软件功能的代码开发及测试；

3、从事项目在现场环境的安装、部署与调试；

4、从事项目开发过程所需的文档编写工作。

大数据开发工程师的主要职责 篇18

职责

1、负责web自动化系统的编码和自测并有效地按照计划完成工作。

2、解决线上产品运行中出现的技术问题。

3、积极了解相关新技术及趋势，促进技术创新，持续改进系统架构，提高用户体验。

职位要求

1、计算机相关专业本科及以上学历。

2、精通web开发的相关技术，3年及以上使用java进行web开发的经验。

3、熟悉springboot、mybatis、sqlite数据库等相关技术。

4、掌握javascript、ajax、jquery，等开发技术;

5、熟悉selenium等自动化技术优先。

6、具有良好的沟通技能，团队合作能力，勤奋好学，热爱技术，乐于分享知识与技术。

大数据开发工程师的主要职责 篇19

1、负责游戏核心架构的搭建以及技术攻关;

2、使用unreal 4引擎进行游戏客户端模块开发，游戏客户端框架的搭建和后续功能的开发，对领域前沿保持跟进，针对需求做出最优选择;

3、负责MMO游戏项目的必要的技术尝试和开发流程探索。