大数据开发工程师的岗位职责（精选19篇）

大数据开发工程师的岗位职责 篇1

职责:

1、负责所分管团队的团队建设和日常管理工作;

2、负责核心技术问题攻关和性能优化，持续维护和引进最新的大数据技术到城市大数据平台中，支撑城市级大数据平台业务;

3、承担城市数据标准编制和数据模型的设计;

4、承担项目中数据相关方案设计及数据团队管理;

5、参与城市大数据项目中数据采集、加工过程、分析挖掘模型算法的实施工作。

任职资格:

1、1年以上数据开发工作经验，熟练使用SQL查询引擎;

2、熟悉Hadoop、Mpp、Oracle等至少一种数据仓库工具

3、具备良好的编程语言基础如：java/python/scala/c++/shell等

4、二本以上学历，计算机相关专业或者有相关培训经历者优先

5、 个人素质要求：目光长远、态度诚恳、岗位有稳定性，能够长期培养、具备很强的自学能力、承压能力强、接受出差支援项目等工作。对数据工作具备浓厚的兴趣并有明确职业规划，优秀的学习能力和团队沟通协作能力，对新技术有浓厚兴趣并有钻研精神。

大数据开发工程师的岗位职责 篇2

职责：

1、负责数据分析、加工、清理，相关处理脚本和程序的开发;

2、负责开发大数据工具，如报表平台、多维度分析工具、ETL平台、调度平台的研发;

3、负责分布式大数据平台应用开发(Hadoop/Spark/Hive/HBase等);

4、负责大数据相关平台的维护、优化。

任职要求：

1、本科及以上学历，计算机相关专业，具有5年及以上的大数据ETL或数据开发经验，熟悉大数据组件的维护以及调优;

2、熟练掌握Java或Python编程语言，熟悉大数据架构体系，熟悉Hadoop、HDFS、Hive、HBase、Spark、Kafka等技术中的一个或者多个，熟悉Sqoop、DataX等数据导入工具;

3、能熟练使用Hive、HBase、Spark等加工和处理数据，有海量数据处理经验;

4、有数据仓库开发经验/BI系统开发经验优先;

5、有电商行业数据处理与分析平台开发经验者优先。

大数据开发工程师的岗位职责 篇3

职责：

1、从事Hadoop、Spark、Hbase、hive等分布式大数据产品的设计和开发;

2、针对部门大数据业务进行大数据分析、挖掘等产品应用的开发;

3、大数据平台各类数据业务抽象及模型化;

4、参与大数据管理平台的开发及维护;

5、负责大数据平台数据及相关的应用开发，调优及维护;

6、为项目相关开发人员提供大数据技术指导及解决大数据平台应用中遇到的技术难题;

7、良好的团队合作与沟通能力。

任职要求：

1、本科及以上学历，2年以上大数据应用开发经验;

2、具备Java、Python、Scala其中两种语言的开发经验;

3、了解泛Hadoop大数据生态圈，熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中两种以上技术，并有实际的项目开发经验，有相关源码研究者优先;

4、具备ETL开发与运维能力，有Flume、kettle经验优先;

5、熟悉大数据平台的搭建过程，熟悉数据处理流程，有TB级以上数据处理经验优先，有实时数据处理经验者优先;

6、熟悉离线和实时数据处理流程，熟练使用Spark，Flink处理TB级数据优先;

7、熟悉Linux系统环境，有shell等脚本编写经验，熟悉Mysql、PostgreSql、Oracle等常用关系数据库，熟练编写SQL语句;

8、熟悉Yarn,Kubernetes,Azkaban等资源调度框架者优先;

9、熟悉Datax的二次开发，并有实际开发经验优先。

大数据开发工程师的岗位职责 篇4

职责

1、负责基于hadoop/spark生态系统、亿级别数据的全文检索，搜索引擎的产品研发;

2、基于海量用户行为数据和其他数据，分析和研究数据与实际业务的关联关系，并与实际业务应用相结合开发;

3、负责大数据分析需求设计和开发，承担数据抽取、清洗、转化等数据处理程序开发。

任职要求：

1、熟悉Hadoop/HBase/Spark/Storm/Redis/Kafka/ES/Flume技术及其生态圈，具备相关项目开发经验，有数据实时计算项目经验优先;

2、有搜索引擎全文检索开发经验 ，如：elasticsearch、solr;

3、熟悉python、R任意一门开发语言;

4、有SAAS，PAAS企业级应用平台或者互联网，金融等大型应用平台开发经验优先考虑;

5、 本科及以上学历，计算机/软件工程/统计学/数学等相关专业，互联网/金融等行业3年以上工作经验;

6、拥有良好的代码习惯，要求结构清晰、命名规范、逻辑性强、代码冗余率低，代码注释清晰;

7、熟悉使用svn，禅道等项目管理工具，有良好的团队协作开发经验.

大数据开发工程师的岗位职责 篇5

职责：

1、依据客户需求完成大数据项目的数据分析及建模;

2、进行大数据核心算法的编写;

3、参与项目的需求分析、系统设计、编码工作;

4、参与开发过程中相关新技术的研究和验证。

5.协助承担架构性的体系设计和改造工作，配合制定技术实施方案，按照总体设计组织子系统的设计和开发。

任职要求：

1、精通数据建模、数据体系建设，具备数据仓库架构设计、模型设计和处理性能调优等相关经验;

2、具有丰富的基于hadoop体系的数据平台、数据仓库建设经验，精通基于hadoop源码的开发、优化改造及成功应用案例;

3、精通hadoop生态体系各项技术，如kafka、flume、hive、impala、hbase、spark等，具有100+节点hadoop集群的开发、运维经验;

4、具有对大型hadoop集群的硬件规划能力;

大数据开发工程师的岗位职责 篇6

职责：

1、根据产品设计文档和UI原型，利用HTML5相关技术开发移动端的web前端页面;

2、基于HTML5.0标准进行页面制作，编写可复用的用户界面组件;

3、持续的优化前端体验和页面响应速度，并保证兼容性和执行效率。

岗位要求：

1、计算机或相关专业专科及以上学历，1年以上的HTML5开发经验;

2、具有独立完成前端开发工作的能力;

3、熟悉移动端的前端开发、多浏览器兼容及移动端机型适配方式;

4、熟练掌握web系统开发技术，熟悉javascript、jquery、CSS3、HTML5、Ajax，能快速定位解决浏览器兼容性问题;

5、熟悉常见页面布局方式，移动端响应式页面布局方式，熟悉css性能优化方式。

大数据开发工程师的岗位职责 篇7

职责：

1、 参与软件自动化测试等系统的开发、测试等过程，负责工程中主要功能的代码实现。

2、 具有良好的协调、沟通能力，并能够根据规划需求制定相关技术与产品的解决方案。

3、 研究新技术，积极进取，对新技能容易上手。

4、 协助项目经理完成系统的构建和运维。

5、 服从公司的工作安排。

技能要求：

1、本科或以上学历，计算机相关专业，3年以上Java开发工作经验。

3、熟练使用 Java后端开发语言和技术框架：Spring Boot、Spring Data、Spring MVC等技术。

4、熟悉J2EE技术架构体系，具备面向对象设计思维与能力。

5、熟练使用JavaBean、Servlet、Jsp、WebService等开发技术。

6、具有强烈的责任心和良好的沟通能力，优秀的团队合作精神，抗压能力强。

7、有微服务DevOps模式开发经验优先，有ext js项目开发经验优先，有解决跨域问题的经验优先。

大数据开发工程师的岗位职责 篇8

职责：

1、参与银行、支付、保险等系统的开发工作;

2、参与需求分析，系统设计和开发等各项工作;

3、能按时、独立、高质量的完成工作，对自己的代码严格要求;

4、能指导初级程序员工作，并负责CodeReview;

5、能解决复杂的技术问题;

任职要求：

1、3-5年JAVA实际开发经验，计算机相关专业大专以上学历(硬性要求：学历必须学信网可查)

2、熟悉Java主流框架，能够独立完成功能模块设计和开发;

3、掌握HTML、JavaScript、CSS、Ajax、JQuery等前端技术;

4、熟悉Oracle、MySql等主流数据库的使用，熟悉存储过程及SQL的性能优化;

5、熟悉Tomcat、JBoss等应用服务器的应用部署和配置，有Linux操作经验;

6、具备良好的表达和沟通能力，能很好的融入团队工作;

7、有银行、支付、保险等相关系统开发经验优先;

大数据开发工程师的岗位职责 篇9

职责：

1、负责保理业务系统的需求设计、开发、测试验收和升级完善。

2、负责与软件系统开发商对接，制定项目计划，合理控制项目实施进度，确保按时、高质量的完成符合业务需求和高质量的产品;

3、负责对应用运维岗位人员的进行培训、协调解决使用中遇到的技术问题。

任职资格：

1、3年左右保理、供应链金融、小贷网贷系统等开发经验;

2、有熟悉新技术和成熟技术，对系统在金融业务应用方面有较深入的了解;

3、熟悉金融业务系统架构，具有较强的用户需求分析能力和系统研发能力;

4、有金融公司系统运维经验，对银行业务较熟悉，有在金融机构工作的经历，懂金融保理业务更佳。

大数据开发工程师的岗位职责 篇10

职责：

1.独立完成项目的系统分析、设计、并主导完成详细设计和编码的任务，确保项目的进度和质量;

2.针对业务，进行数据库设计和优化;

3.时刻关注并学习新技术，并能够在实践中应用，带领后端团队共同进步，完成每月的常规发布任务;

4.能够带领团队解析需求，商讨具体开发方案，对技术团队的开发质量把关 。

任职要求：

1.3-5年java开发经验，java基础扎实，熟悉I/O、多线程、集合等基础框架。

2.熟悉linux、虚拟化以及容器技术及云服务的发展方向。

3.熟悉web开发、熟练使用Spring家族框架。

4.精通使用常用的设计模式。

5.责任心一定要强，逆商要高。

6.能接受保险项目的外包(工作地还是在本公司)。

7.要有一定的管理、协调能力，能够迅速定位问题并推进直至解决。

大数据开发工程师的岗位职责 篇11

1.依据产品需求完成高质量的Web前端开发和维护;

2.对具体的产品进行性能优化，实现极致的Web加载、执行和渲染时间;

3.在理解前端开发流程的基础上，结合前端实际建立或优化提升工作效率的工具;

4.负责微信开放平台和腾讯云相关应用的开发;

5.在理解产品业务的基础上，结合前端技术建立或优化Web的交互方式。

6.负责H5和android/ios原生代码的对接和开发。

大数据开发工程师的岗位职责 篇12

职责：

1、负责电商平台Java Web系统的开发编码工作;

2、负责重点难点技术问题的研究及解决，编写较规范和高质量的设计文档;

3、对初中级开发人员提供技术上的指导，帮助项目组成员进行详细设计和开发。

任职要求：

1、计算机或相关专业优先;

2、三年以上JAVA研发和软件设计经验;

3、熟练html5、javaScript,jquery等web前端技术;

4、参与过大中型项目的核心功能开发工作，有良好的系统规划能力，制定系统架构，编写技术规范和项目开发文档;

5、熟悉SpringBoot、SpringCloud、SpringMVC、MyBatis、hibernate等开源框架;

6、熟悉MySQL、Oracle或NoSQL数据库技术，熟悉SQL调优机制，有大型数据库软件开发经验者优先;

7、熟悉分布式、缓存、消息、数据分析等工作机制，具有大型分布式、高并发、高负载、高稳定性的系统设计开发经验优;

8、表达能力好，思维清晰敏捷，工作认真负责，善于学习、具有分析、解决问题的能力，创新意识强，有团队精神;

9、有参与过医药行业项目经验优先。

大数据开发工程师的岗位职责 篇13

职责：

1)负责后台系统的研发，及时解决项目涉及到的技术问题。

2)参与架构设计、方案讨论和技术调研;

3)参与系统需求分析与设计，负责完成核心代码编写，接口规范制定

4)带领3至4人团队，进行日常开发和测试工作，解决开发中的技术问题;

岗位要求：

1)计算机相关专业毕业，精通spring框架，阅读过spring源码，熟悉其事务机制

2)有良好的编码习惯及严谨的逻辑思维，熟悉GIT等版本管理软件

3)熟练掌握Spring、SpringMVC、mybatis、JavaScript、JQuery、CSS3、XML、AJAX等知识，能够灵活运用

4)熟悉软件设计流程和软件工程规范，具备编写良好而规范的设计和技术文档的能力

5)数据建模经验丰富，能够独立完成单个项目的数据建模工作

6)熟悉Oracle、sql server、mysql等大型数据库一种或多种，熟练编写SQL语句及sql优化，能够跟踪诊断典型的线上问题

7)对技术有激情，喜欢钻研，能快速接受和掌握新技术，有较强的独立、主动的学习能力，良好的沟通表达能力和团队协作能力。

大数据开发工程师的岗位职责 篇14

1、从事软件产品模块的功能设计、数据库设计工作；

2、从事软件功能的代码开发及测试；

3、从事项目在现场环境的安装、部署与调试；

4、从事项目开发过程所需的文档编写工作。

大数据开发工程师的岗位职责 篇15

职责：

1.电商平台技术架构设计和系统框架搭建;

2.电商平台核心代码编写，注重编码规范和系统性能;

3.搭建小程序订单系统+即使通讯系统，有关商城及即时通讯经验优先考虑。

4.参与开发过程的代码设计、审核和检查。

职位要求：

熟练掌握PHP开发语言;熟悉PHP/Ajax/JavaScript/XML/Webservice;

对B2B,B2C等电商平台系统有深入的了解，有过1个以上电商平台系统的开发经验，并带领过项目组完成过至少一个电商平台系统的开发工作;

掌握架构设计理论，实践，掌握多种可重用架构机制和模式，掌握流行技术框架和工具;

有大型分布式项目开发经验、微服务架构经验优先、有高并发的系统核心研发经验优先。熟悉门户网站的基本系统架构，对内容发布系统、视频直播点播技术、网站统计分析系统、网站电子商务系统有深入了解;

有良好的沟通能力，具有跨部门协作的经验、推进能力强，责任心强;

熟练掌握缓存技术，网站优化，服务器优化，分布式集群技术，负载均衡，消息中间件等;

掌握PHP及MVC架构技术，具备在Linux平台下使用PHP开发网站的经验，可在服务器系统配置php+mysql运行环境;

具有PHP缓存技术、静态化设计方面的经验;

学习能力强, 能快速上手新接触的技术. 积极挑战技术难题, 积极向上, 有团队合作精神.

大数据开发工程师的岗位职责 篇16

职责:

1. 设计并开发持续交付、资产管理、系统监控等自动化运维平台;

2. 负责运维平台和相关运维工具的开发;

3. 提高自动化运维水平、故障响应能力、提升迭代效率、降低运维人力成本;

4. 运维相关的新技术的研究。

任职资格:

1. 计算机相关专业专科(以上)毕业，3-5年以上的工作经验。(大型互联网企业背景优先);

2. 有一定实际运维工作经验，具有Linux系统管理基本知识和1年以上实际开发经验;

3. 掌握shell/python/perl/php其中一种脚本语言;

4. 掌握Javascript、CSS、html前端开发。

大数据开发工程师的岗位职责 篇17

1、 负责医疗器械设备的机械方案设计、项目评估;现有仪器设备的改进设计;

2、 完成相关图纸绘制、3D模型及加工图纸的转化、设计数据的输出;机械相关零部件的选型、采购清单的编制与输出;

3、 制作设备的机械BOM表;

4、 产品的安装、调试及验证。

大数据开发工程师的岗位职责 篇18

职责：

1、公司产品无线线端web端的制作、开发和优化

2、根据设计稿,编写静态页面和交互、特效等功能的脚本程序

3、优化前端组件的灵活性和可扩展性

4、跟踪研究前沿的前端技术,并应用到公司的产品开发当中

任职要求:

1、3-5年工作经验,了解react框架前端技术,熟悉流行的前端ui库，能够设计开发工具型网站，如:码工助手;

2、熟练掌握DIV+CSS网页布局,并且对模板化、模块化有一定理解,精通HTML/HTML5、CSS/CSS3等前端开发技术;

3、熟练掌握JavaScript语言核心技术DOM、Ajax、JSON等,对javascript框架(如react/jQuery/jq ui 等)有一定的经验;

4、对css/JavaScript性能优化、解决多浏览器兼容性问题有一定的经验;

5、对无线端开发有一定经验，能够较好解决ios,Android端兼容问题;

6、具备良好的责任心、逻辑思维强、善于交流和表达、较强的学习能力、优秀的团队沟通与协作能力。

7、爱思考,沟通能力强。

大数据开发工程师的岗位职责 篇19

1. 精通PHP语言，能够独立开发中型项目，能够协作开发大型项目

2. 精通MySql数据库，能够独立搭建中型项目所需数据库，能够协作搭建大型项目 所需数据库

3. 熟悉Linux系统，能够进行简单的服务器配置，能够独立部署项目

4. 熟练使用svn等版本管理及团队合作工具

5. 了解JavaScript，能够编写简单的JavaScript代码

6. 了解CSS，能够进行简单的页面布局调整

7. 使用过多个PHP框架，了解Yii 2.0框架