天天范文

位置:首页 > 文秘 > 岗位职责

大数据开发工程师岗位的工作职责说明(通用18篇)

大数据开发工程师岗位的工作职责说明 篇1

职责:

大数据开发工程师岗位的工作职责说明(通用18篇)

1、负责公司大数据基础平台产品开发工作;

2、完成产品/项目划分的研发任务,按需求规范进行研发;

3、具备良好的需求分析能力、业务建模能力,参与产品和项目相关模块的需求讨论,概要、详细设计;

4、具备良好的架构分析能力与设计能力,积极参与前期设计;

5、能根据设计方案和计划进行编码实现,在进度和质量上符合方案和计划的要求;

6、及时对BUG库中的软件问题进行跟踪修正。

岗位要求:

1、三年以上工作经验,一年以上大数据平台架构及ETL相关经验,可独立搭建/运维CDH/Spark整套平台架构;

2、精通Python/Java/Scala/SQL/Shell等语言中两种以上,熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三种以上开源框架的原理和源码;

3、熟悉容器平台开发或者开发优先考虑,有docker、kubernetes相关开发经验更佳;

4、学习能力强,适应能力好,有丰富的问题原因定位及运维技术支持经验;

5、有市场上成熟的大数据平台产品实际架构/开发经验优先。

大数据开发工程师岗位的工作职责说明 篇2

职责:

1、根据工作安排高效、高质地完成代码编写,确保符合规范的前端代码规范;

2、负责公司现有项目和新项目的前端修改调试和开发工作;

3、与设计团队紧密配合,能够实现实现设计师的设计想法;

4、与后端开发团队紧密配合,确保代码有效对接,优化网站前端性能;

5、页面通过标准校验,兼容各主流浏览器。

任职要求:

1. 本科及以上学历,熟悉j2ee,精通web开发有5年工作经验以上(学习能力好放宽至4年),熟悉jsp,spring框架;

2.悉主流移动web开发框架,并有过实际项目开发经验;

3.有kylin,atlas,oozie,azkaban,spark,ranger任意一种使用项目使用经验。

大数据开发工程师岗位的工作职责说明 篇3

职责:

1、负责公司c端产品以及广告数据的平台数据基础建设;

2、大数据平台的搭建与维护;

3、优化算法提高执行效率;

4、数据挖掘相关开发。

职位要求:

1. 本科及以上,计算机、软件工程、统计学、数据挖掘、机器学习等相关专业;

2. 熟悉JAVA语言及JAVA生态下的开发,了解多线程并发,能独立完成应用开发和部署;

3. 3年及以上大数据流程架构经验,熟悉Hbase/Hive/Hadoop/Spark或等主流分布式开发平台,有高性能集群设计和开发经验;

4. 能熟练操作Linux,熟练掌握SQL数据库语言 HiveSQL/Mysql/Sqlserver;

5. 对有广告营销大数据算法/开发经验者优先,有大型数据项目经验优先,有用户行为分析、用户建模、业务建模经验者优先;

6. 具有良好的逻辑分析能力、沟通能力和协调能力;

大数据开发工程师岗位的工作职责说明 篇4

职责:

1. 负责公司大数据业务集群的运维工作确保高可用;

2. 负责基础运维、故障定位、容量规划、扩容及性能优化;

3. 设计实现大规模分布式集群的运维、报警监控和管理平台;

4. 参与业务架构设计,在设计阶段给出可运维性改进建议;

5. 深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的大数据运维技术及发展方向。

任职资格:

1.大专以上学历,2年及以上大数据运维工作经验,熟悉hadoop/hbase/hive/Yarn/Spark等分布式相关技术,熟悉源码尤佳,至少掌握python/shell中的一种语言,接受优秀应届毕业生;

2.了解大数据平台应用架构,具备常见问题的基本分析和解决能力;

3.熟悉Linux操作系统的配置、管理及优化,能够独立排查及解决操作系统层面的问题;

4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web应用/中间件及主流开源数据库的使用和配置。

大数据开发工程师岗位的工作职责说明 篇5

职责:

1、负责基于Hadoop框架的海量数据平台建设

2、参与大数据平台的数据架构设计,完成从业务模型到数据模型的设计

3、基于海量数据的数据仓库,为业务搭建通用的查询和分析解决方案

4、管理并优化存储&计算资源利用效率、监控并维护例行ETL任务

5、梳理整体业务指标,可视化报表开发

应聘要求:

1、计算机本科及以上学历,5年以上大型数据仓库架构设计、模型设计、ETL设计相关经验

2、熟悉Hadoop生态,熟悉Oracle、SQL数据库中的一个或多个,有一定的性能优化经验

3、熟练掌握Java语言,MapReduce编程,Python/Shell等脚本语言,Linux操作系统

4、具备大数据云平台、计算存储平台、可视化开发平台经验

5、业务理解力强,对数据敏感,有互联网行业产品数据分析经验者优先

大数据开发工程师岗位的工作职责说明 篇6

职责:

1、进行网站程序开发与实现,参与项目的编程、调试和模块测试工作;

2、根据项目需求,能够独立按时完成网站开发任务;

3、根据主管要求对现有项目进行修改;

4、配合项目学习其他需要的技能。

任职要求:

1、 计算机相关专业本科或以上学历;

2、有2年以上PHP开发经验,熟悉MVC/OOP,具有独立承担模块分析、设计开发能力;

3、对主流的PHP框架有实战经验,熟练使用Thinkphp框架者优先;

4、熟悉或擅长MYSQL或其他大型数据库的使用及优化,熟悉MongoDb/Redis等NoSQL数据库;

5、熟悉HTML/CSS/JS,了解HTML5/CSS3/AngularJS/Bootstrap,掌握常用的前端构建工具者优先;

6、熟练使用Linux操作系统,熟悉常见软件的编译部署(如Mysql/Nginx/Apache)和优化;

7、拥有良好的代码习惯,结构清晰、命名规范、逻辑性强、代码冗余率低,有撰写详细的编码注释的习惯;

8、学习能力强,拥有优秀的逻辑思维能力,有良好的时间和流程意识,有较好的沟通交流能力,能够迅速融入团队;

9、有大数据产品软件开发经验者优先。

大数据开发工程师岗位的工作职责说明 篇7

1、负责数据管控产品的实施落地;

2、负责数据管控平台、数据标准模块、数据质量模块、元数据管理模块的实施部署;

3、负责业务流程的推广与控制,保证项目顺利落地;

4、负责管控平台部分功能的定制开发;

5、负责对数据管控平台各模块的内容进行培训。

大数据开发工程师岗位的工作职责说明 篇8

职责:

1、 完成与java相关的开发任务,确保项目的按时保质完成;

2、 对软件进行后续维护和管理;

3、 能够有效的与需求人员进行沟通,实现产品的设计意图;

4、 维护和升级现有产品,快速修复Bug和缺陷。

任职要求:

1、专科及以上学历, 计算机及相关专业毕业,2年以上java开发经验,有公安行业系统经验着重考虑;

2、能适应项目现场开发/实施/维护所需要的出差;

3、熟练使用Eclipse,Idea等开发工具进行Java开发,熟悉SSM,SpringBoot,SpringCloud等框架应用;熟练掌握JQuery,Vue,FreeMarker,Thymeleaf等前端的开发技术,以及掌握Oracle、Mysql数据库应用开发。有高并发大数据开发经验者优先;

4、具有较强的时间管理、耐压能力、沟通协调能力,具有一定的市场意识和素养。

大数据开发工程师岗位的工作职责说明 篇9

职责:

1.负责公司旗下各系统功能开发、维护;

2.维护、升级及优化已有程序,编写技术文档;

3.独立负责部分功能模块的系统分析、数据库设计、程序开发等;

4.配合运营部门进行活动页面需求分析,完成代码编写和测试。

任职资格:

1.本科及以上学历,计算机专业优先,5年及以上JAVA开发经验者;

2.熟练掌握 java web 软件开发技能,掌握主流开发框架:SSH、SSM、springMVC;

3.熟悉互联网应用基本技术架构,熟练使用一种或多种 web 容器服务,如:nginx,jetty等;

4.掌握一种或多种常见 cache 开源服务:memcache,redis;

5.熟悉常见分布式异步框架,会使用一种或多种消息服务:kafka,activeMQ,rabbitMQ 等;

6.有较强的沟通能力、团队合作精神、高度的责任心。

大数据开发工程师岗位的工作职责说明 篇10

职责:

1. 负责产品研发Java后台设计与开发工作、客户现场相关项目的Java后台设计与开发工作;

2. 对自行编制的功能代码进行功能与性能优化,可协助H5、APP端、第三方进行接口联调,及时修改测试、提出BUG,确保代码质量;

3. 撰写相关的技术文档,主要包括设计文档、接口文档、部署文档、使用手册等;

4. 参与项目整个过程的实施工作,并具备独立安装部署和后期实施运维能力;

5. 参与到项目售前技术支持工作,能出差实施项目。

任职资格:

1. 计算机相关专业毕业,有3年以上Java工作经验,有政府信息化或智慧城市相关项目经验优先;

2. 熟练使用SQL语句与SQL优化,熟悉主流数据库MySql、Oracle等;

3. 熟练J2EE主流技术框架,如Spring、SpringMVC、Mybatis、shiro等;

4. 精通HTTP通信协议、RESTfull API、HttpClient等接口规范与应用;

5. 熟练Java相关边沿技术与工具:Eclipse、IDEA、Maven、SVN、Git、JavaScript、Poi、Log4j、freemarker、redis、Quartz、MQ等

6. 熟练使用Linux常用命令,可以完成Java服务运行环境的安装、部署、监控等工作;

7. 具有良好的理解能力与沟通能力,能正确理解产品或项目目标与需求,有问题可以积极沟通确认,能做到及时准确的上报下达;

8. 具有良好的职业素质与团队合作精神,可以严格遵守公司与项目组相关规定,有强烈的集体团队意识;

9. 对工作态度主动积极、认真负责、且具有一定的抗压能力;

大数据开发工程师岗位的工作职责说明 篇11

职责:

1、项目立项成功,在技术经理带领下,进行产品开发工作,独立完成功能模块,协助完成数据库的设计与核心业务编码的工作;

2、产品技术性文档撰写,含产品研发过程中概要设计文档,详细设计文档,接口文档;

3、对上线产品进行日常运维,解决上线产品运行中出现的技术问题,对上线产品进行日常的数据分析与运营维护;

4、 与外部业务系统的接口设计与对接工作;

5、 预判、定位系统发展过程中的问题,提出解决方案,攻克技术瓶颈与难点;

6、实时关注用户应用平台情况,向技术经理汇报平台运营情况,在技术经理规划下,不断根据反馈自行迭代优化代码或架构,提高平台性能;

7、 指导初级开发工程师进行开发与维护。

岗位要求:

1、大专及以上学历,计算机或相关专业优先;

2、2年以上JAVA研发经验,熟悉MVC设计模式,熟练使用主流的J2EE开源架构(struts2,springmvc,ibatis等) ;

3、熟悉掌握各种WEB前端技术,包括 、AngularJs、element-ui等;

4、熟悉MySQL、Oracle或NoSQL数据库技术,熟悉SQL调优机制,有大型数据库软件开发经验者优先;

5、熟悉mongodb,redis、memcached,nginx,tomcat的一种或多种;

6、了解软件工程、编程规范、有过程控制意识;

7、良好的沟通能力及团队合作精神,责任心强,工作认真负责,善于学习与解决问题;

8、有大数据相关项目开发经验优先考虑。

大数据开发工程师岗位的工作职责说明 篇12

职责:

1、参与项目整体设计,开发和计划的实施;

2、独立完成功能模块的开发,并负责各个功能及模块的接口设计工作;

3、编写核心代码与组件;

4、负责系统的性能优化和技术难点公关;

5、对开发阶段任务进行WBS分解,制作开发计划,带领项目团队开发人员协同完成各个功能开发;

任职条件:

1.具有4年以上独立PHP开发经验。

2.熟悉mysql,包括数据库设计,速度优化。

3.对互联网的技术有较全面理解,能独立应付大访问量下网站的设计和开发工作。

4.具有PHP缓存技术、静态化设计方面的经验,能够独立开发。

5.精通PHP,具备在Linux平台下使用PHP开发服务端程序,包含服务器部署、配置优化、响应速度优化、并发处理,SHELL脚本语言等。

6.具有较强的团队意识,高度的责任感,对工作积极严谨,勇于承担压力。

7.有良好的沟通和学习能力、有较强的团队协作能力以及快速解决问题的能力,并有组内领导能力。

大数据开发工程师岗位的工作职责说明 篇13

职责:

1、根据产品需求、设计文档,负责公司大数据分析平台产品相关开发工作;

2、协助架构师进行系统设计工作,参与部分技术预研工作;

3、遵循编码规范,及时完成分配的开发任务,保证项目开发进度;

任职资格:

1、大专以上学历,计算机相关专业,两年以上Java开发经验;

2、扎实的Java基础,良好的编程规范,熟练掌握spring应用开发框架,有较好Web前端功底;

3、熟悉Linux操作系统、MySQL/Oracle等数据库,熟悉Javascript、HTML、CSS等网页开发技术;

4、具备较强的编程能力,较强的理解能力,能够独立根据业务需求进行技术实现;有系统设计能力优先;

5、具备良好的沟通能力、团队协作精神,主动学习新技术的能力。

大数据开发工程师岗位的工作职责说明 篇14

职责:

1、根据需求安排高效、高质地完成代码编写,确保符合前端代码规范;

2、与产品和设计团队紧密配合,能够有效沟通产品需求和设计的想法;

3、与后端开发团队紧密配合,确保代码有效对接,优化前端性能;

4、承担前端开发工作,对代码质量及进度负责;

5、利用HTML5、CSS3等相关技术参与前端应用的开发。

任职要求:

1、 本科及以上学历,计算机相关专业;

2、良好的英文读写能力;互联网相关3年以上从业经验;

3、 精通HTML/XHTML、CSS、JavaScript、AJAX、JSON、XML等技术;

4、 JavaScript程序模块开发,通用类库、框架编写;

5、 熟练掌握Jquery、Bootstrap、VUE、Angular等前端框架,熟悉对象化Javascript编程;

6、熟悉CSS、CSS3各种样式属性;

7、有html5开发经验和手机、Pad 等多平台上的前端应用开发者优先。

大数据开发工程师岗位的工作职责说明 篇15

职责:

1、负责API接口、管理后台的开发和维护;

2、参与技术架构设计和优化,根据业务规划及技术规则制定应用架构方案;

3、参与技术难题攻关,持续提升系统在高并发、海量请求下的处理能力;

4、数据分析,提供决策数据支持及建议;

5、参与线上产品的运维。

任职要求:

1、 PHP基础扎实,5年以上相关工作经验,有其它语言(Java/Python/Go)开发经验者优先;

2、 精通开源框架(ThinkPHPswooleWorkerManCodeIgniter等)的原理及设计模式;

3、 精通MySQL、NOSQL、MongoDB等数据库,能够编写和优化复杂的SQL程序;

4、 熟悉api接口开发,后台开发或熟悉数据开发工作经验者优先,熟悉消息队列、任务调度服务开发经验者优先;

5、 熟悉Unix/Linux操作系统和Nginx/Apache/Tomcat等服务器软件的配置,熟练掌握shell、Python、Perl其中一种脚本语言;

6、 熟悉主流的分布式架构,有高负载大并发的实际工作经验;

7、 能够快速定位和解决系统中的性能方面问题,熟悉常用的数据分析方法;

8、 需有一定的运维技术,有docker使用经验,了解持续集成交付部署。

大数据开发工程师岗位的工作职责说明 篇16

职责:

1.参与基于JAVA技术的应用系统开发;

2.参与需求分析,根据具体的模块需求,独立完成模块的设计编码工作;

3.负责所开发模块的故障修复、性能调优等;

4.根据开发规范与流程完成系统设计、编码、测试以及相关文档的编写;

任职要求:

1.计算机相关专业本科及以上学历,3-5年以上Java开发经验

2.熟练掌握Java、HTML/Javascript/CSS,JSP/Servlet等JAVAEE相关技术,有vue相关经验更佳;

3.熟练掌握MySQL等数据库;

4.熟练掌握Tomcat等应用服务器、nginx等负载均衡软件;

5.精通MVC模式下的B/S开发,熟悉Spring/Springboot/SpringMVC/MyBatis等开源框架;

6.敬业、责任心强,良好的沟通能力。

大数据开发工程师岗位的工作职责说明 篇17

负责数据库系统架构的设计和实施,参与项目中的数据库逻辑结构设计,参与大数据平台的架构设计;

基于产品需求说明书,设计审核并创建数据库存储结构、数据库对象;

根据业务需求批量更新数据;开发和维护数据库定时任务;使用spark SQl等技术,开发数据分析功能;

监控并及时发现TOP SQL,通过优化索引结构提高性能或给研发人员提出优化建议;

为企业信息化和其他内部相关业务提供相关技术支持。

大数据开发工程师岗位的工作职责说明 篇18

职责:

1.根据需求完成功能设计和代码编写;

2.负责后端系统性能优化和改进;

3.独立承担子系统和模块的架构设计以及开发;

4.从技术层面参与产品讨论、设计;

任职要求:

1.精通Java,4年以上Java开发经验;

2.精通J2EE开发相关技术和框架,对各种框架如Spring、Hibernate/Spring Data、SpringMVC、MyBatis、Shiro等有深入的应用经验;

3.精通mysql、redis、mongoDB等数据库和能够独立编写性能良好的SQL代码、并能够进行SQL调优;

4.熟练掌握jQuery、Javascript、JSP、HTML、CSS、AJAX等Web前端编程技术;

5.具备良好的文档撰写能力,能够独立交付数据接口文档,编码时能清晰明了的注释;

6.具备钻研新技术的兴趣和能力;

7.积极主动,善于沟通,独立工作能力强并具备良好的团队合作意识。