首页 > 实用范文 > 办公文秘 > 岗位职责 > 大数据开发工程师岗位的基本职责(通用29篇)正文

《大数据开发工程师岗位的基本职责(通用29篇)》

时间:

大数据开发工程师岗位的基本职责(精选29篇)

大数据开发工程师岗位的基本职责 篇1

职责:

1、 负责移动端H5应用前端页面功能的开发与后期维护工作;

2、 根据版本计划制定开发工作安排,负责新版本发布及上线工作;

3、 定期收集用户需求,分析并实现最优的前端UI解决方案,持续改善用户体验;

4、 熟练使用HTML5、CSS3、AngularJS等技术,完成页面优化与重构;

5、 解决系统在各品牌手机、浏览器环境出现的兼容性问题。

任职要求:

1. 2年及以上Web前端或Web APP相关工作经验,大专及以上学历;

2. 具有良好沟通、语言表达能力、团队合作意识,有责任心、上进心,能积极、主动工作;

3. 熟悉HTML5、CSS3、JavaScript等Web前端开发技术,有良好的编程习惯,产出符合W3C标准、兼容多种浏览器的前端页面代码;

4. 熟悉Ajax、DOM、XML、JSON等相关技术,熟悉面向对象,使用过jQuery、Prototype等js框架的至少一种;

5. 熟悉AngularJS、Vue等前端MVC/MVVM模块化开发框架,具有AngularJS开发经验更佳;

6. 熟悉移动端主流浏览器的适配,对Android与iOS等不同平台的html5页面适配充分了解;

7. 熟练掌握Photoshop,Fireworks,AI其中一个设计软件,并能独立完成切图工作;

8. 有Cordova移动跨平台中间件使用经验者更佳。

大数据开发工程师岗位的基本职责 篇2

职责:

1、 负责大数据平台架构的整体设计,承担数据抽取、清洗、转化等数据处理程序开发;

2、 为业务运营提供技术支持,完成应用系统的搭建、优化、升级工作,保证平台稳定运行;

3、 编写系统的需求分析、设计、开发和部署文档等。

岗位要求:

1、硕士及以上学历,计算机、自动化、通信等相关专业;

2、熟练掌握Java语言,并熟悉Python语言,熟悉分布式系统架构,有hadoop,spark系统架构经验;

3、熟悉实时计算框架storm,flink,spark streaming其中之一;

4、熟练使用SQL,熟悉数据库原理,熟练使用至少一种主流关系型数据库;

5、熟悉软件开发流程,能够根据需求编写需求、设计、开发手册等项目过程文档;

6、具有良好的沟通能力和主动性,抗压能力强。

大数据开发工程师岗位的基本职责 篇3

职责:

1.根据需求分析文档完成数据库及程序设计;

2.根据开发计划完成开发任务并能够分析解决软件开发过程中的问题;

3.负责相关技术文档撰写工作;

4.负责解决核心技术问题,对技术方案进行决策;

【技能要求】:

1.全日制本科学历及以上,2本及以上院校。踏实诚恳、责任心强,能接受较大的工作强度,具备良好的沟通能力和学习能力;

2.JAVA基础扎实,精通io、多线程、集合等基础框架;

3.熟悉分布式、缓存、消息、搜索等机制;

4.精通web开发的相关技术,2年使用JAVA进行web开发的经验;

5.精通Java并有较全的知识面,熟悉Spring、Struts、MyBatis等主流框架;

6.了解常用Web前端技术,例如HTML、JS、Jquery、CSS等;

7.熟悉Linux平台下常用命令操作、环境部署;

8.熟悉数据库技术(MySQL/Oracle),数据库优化及SQL优化;

9.熟悉缓存、消息、大数据存储相关技术,例如:redis、memcached、ActiveMQ、mongodb、hbase等;

10.有微信开发、移动端平台开发经验者优先,有银行、保险等金融软件开发经验者优先;

11.工作认真负责、积极主动,富于探索创新精神,良好的沟通能力与团队合作意识;

大数据开发工程师岗位的基本职责 篇4

1、负责数据平台相关业务系统

2、各数据等系统的设计、研发和维护

3、全栈式研发,可以不重度考虑前端设计

4、参与分析部门、算法部门、数据产品部门的需求对接与开发

5、与部门内的DBA、爬虫、算法协作完成项目要求

大数据开发工程师岗位的基本职责 篇5

职责

1. 负责公司项目的维护和开发;

2. 遵守团队的代码规范,编写易读、易维护、高质量、高效率的代码;

3. 参与核心服务模块的设计和开发;

任职资格

1. 有PHP实际开发经验,熟悉ThinkPHP框架;

2. 熟练应用PHP开发语言,熟练面向对象的软件设计方法;

3. 熟练使用SVN代码管理工具;

4. 熟悉Mysql数据库,擅长SQL查询优化,数据库优化;

5. 熟悉Redis,Nginx等;

6. 掌握基础的Jquery、HTML、CSS、JavaScript、AJAX等前端技术;

7. 良好的编码习惯,代码结构清晰、命名规范、逻辑思维能力强、有责任性,良好的沟通表达能力,有团队合作精神优先

大数据开发工程师岗位的基本职责 篇6

职责:

1、根据公司信息化发展需要和业务流程要求,对ERP系统和OA平台进行定制化二次开发和功能扩展,制定二次开发方案、计划并实施,分析并解决开发过程中的问题;

2、或能自主开发满足公司管理需要的软件系统,负责软件产品的架构设计、功能模块设计、数据库结构设计及核心代码开发;

3、对ERP系统、OA平台或自主开发软件系统进行维护,保障软件系统的稳定运行;

4、负责其他系统与ERP接口的技术支持;

5、完成上级临时交办的其他工作。

任职资格:

1、计算机、电子信息工程相关专业,大专以上学历;

2、对ERP系统和OA平台的功能和使用比较熟悉;

3、熟悉软件系统开发过程,有编写代码、编写脚本的经验,熟悉至少两种开发语言;

4、有二次开发经验,熟悉ERP二次开发和实施经验者优先;

5、具有数据库及高级应用程序开发经验;

6、具有通信协议接口开发经验;

7、熟悉SQL Server、Oracle等数据库开发。

大数据开发工程师岗位的基本职责 篇7

职责:

1、负责数据提取与分析工作;

2、负责数据接口设计与开发;

3、负责ETL流程的设计;

4、负责数据建模、数据预处理工作;

5、负责存储过程的编写;

6、负责日常ETL运维等。

任职资格:

1、本科及以上学历,计算机或数据分析相关专业;

2、可以放宽至应届毕业生,具有数据库、ETL、数据分析相关工作(含实习)经验者优先;

3、熟练掌握SQL语言,熟悉存储过程开发;

4、具备较强的责任心,能够承受工作压力;

5、具备MySQL、Oracle开发经验者优先;

6、具备Hadoop、Hive、Pythonk开发经验者优先;

7、具备较强的责任心,上进心、能够承受工作压力。

大数据开发工程师岗位的基本职责 篇8

职责:

1、项目立项成功,在技术经理带领下,进行产品开发工作,独立完成功能模块,协助完成数据库的设计与核心业务编码的工作;

2、产品技术性文档撰写,含产品研发过程中概要设计文档,详细设计文档,接口文档;

3、对上线产品进行日常运维,解决上线产品运行中出现的技术问题,对上线产品进行日常的数据分析与运营维护;

4、 与外部业务系统的接口设计与对接工作;

5、 预判、定位系统发展过程中的问题,提出解决方案,攻克技术瓶颈与难点;

6、实时关注用户应用平台情况,向技术经理汇报平台运营情况,在技术经理规划下,不断根据反馈自行迭代优化代码或架构,提高平台性能;

7、 指导初级开发工程师进行开发与维护。

岗位要求:

1、大专及以上学历,计算机或相关专业优先;

2、2年以上JAVA研发经验,熟悉MVC设计模式,熟练使用主流的J2EE开源架构(struts2,springmvc,ibatis等) ;

3、熟悉掌握各种WEB前端技术,包括Vue.js 、AngularJs、element-ui等;

4、熟悉MySQL、Oracle或NoSQL数据库技术,熟悉SQL调优机制,有大型数据库软件开发经验者优先;

5、熟悉mongodb,redis、memcached,nginx,tomcat的一种或多种;

6、了解软件工程、编程规范、有过程控制意识;

7、良好的沟通能力及团队合作精神,责任心强,工作认真负责,善于学习与解决问题;

8、有大数据相关项目开发经验优先考虑。

大数据开发工程师岗位的基本职责 篇9

1、完成大数据平台报表和可视化工具开发

2、业务系统数据库的规划、设计、实施,并优化数据库建设方案;

3、数据库性能分析与调优、排错、保障业务正常运行;

4、配合其他部门进行的数据处理、查询,统计和分析工作;

大数据开发工程师岗位的基本职责 篇10

职责:

1.根据软件需求说明书和软件设计文档实现软件产品;

2.负责项目概要设计、详细设计等开发文档的编制并实施;

3.从事具体的软件开发,确保研发软件的安全、质量和性能;

4.维护和升级现有软件产品,修复现有软件产品的缺陷。

任职要求:

1. 精通Java后端技术,熟练掌握 HTML/CSS/Javascrtip等前端技术,

2. 精通对象模型,熟练进行对象操作和转换;

3. 熟练使用Spring, hibernate,设计模式;

4. 熟悉Oracle/MySql数据库,能够熟练编写常用SQL语句

5. 熟练掌握Eclipse等开发工具,熟悉Maven、GIT、SVN等版本控制工具。

大数据开发工程师岗位的基本职责 篇11

职责:

1、负责大数据平台的技术和产品的设计、开发、优化和维护;

2、负责大数据平台设计文档编写,线上产品的维护;

3、负责系统性能优化,解决各类潜在系统技术风险,保证系统的安全、稳定、快速运行;

4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;

5、参与指标设计,数据建模,负责将数据模型在系统中实现;

6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;

7、负责追踪整体产品过程及质量把控。

任职要求:

1、专业技能:精通 Hadoop 生态圈中的一项或几项技术,深入了解 Hadoop 及相关组件的部署及调优;设计或开发过大容量,高性能,高可用,易扩展的分布式系统;熟悉实时计算/流式计算系统,至少熟悉一项 Nosql 技术;具有扎实 java 功底及开发能力;对 hadoop,hive,hbase,spark 等相关源码有一定了解;

2、学历背景:计算机相关专业本科及以上学历;

3、工作经验:3年以上JAVA开发经验及1年以上大数据研发经验

4、能力素质:具有出色的抽象设计能力,思路清晰,善于思考,良好的团队合作能力、沟通能力、较好的自学能力,具有敬岗爱业的精神。

5、有团队管理经验者优先。

大数据开发工程师岗位的基本职责 篇12

职责:

1、在上级的领导和监督下按时完成指定工作任务;

2、学习能力强,工作热情高,富有责任感,服从领导安排;

3、根据开发进度和任务分配,完成相应模块软件的编程任务;

4、根据设计文档或需求说明完成代码编写,调试,测试和维护;

5、能够分析并解决软件开发过程中的问题;

任职资格:

1、计算机、软件工程等相关专业本科及以上学历;

2、掌握JAVA语言、理解面向对象编程

3 掌握JavaWeb开发技术及相关框架(SpringMVC、Spring、Mybaits等);

3、熟悉JavaScript、HTML、CSS、XML、Jquery等前端技术,至少使用过Bootstrap、EasyUI、Angularjs等框架中的一种;

4、理解关系数据库原理,熟悉Oracle、Sqlsever、Mysql数据库之一种;

5、善于钻研、具备较强的学习能力和逻辑思维能力;

6、积极主动、具备良好的沟通能力和团队协作能力;

大数据开发工程师岗位的基本职责 篇13

1. 与各个技术方向通力合作,参与无人车系统一个或多个模块的开发,包括但不限于车载操作系统、仿真平台、数据平台、深度学习的平台等,需要较高的代码质量;

2. 设计离线计算及仿真系统,用于无人车模块的开发调试,虚拟场景模拟;

3. 设计性能分析和监控工具,优化系统计算资源分配和整体性能。

大数据开发工程师岗位的基本职责 篇14

职责

1、负责产品开发;

2、负责指导、处理、协调和解决项目中出现的技术问题;

3、根据公司产品的版本管理规范,完成所负责项目的服务器代码的版本归档、版本变更、版本发布工作。

4、负责处理线上版本紧急技术问题,线上版本bug处理;

5、负责服务器系统优化,提高性能。

任职资格

1、软件基础理论知识扎实,具有良好的数据结构、算法功底;

2、精通java,对分布式计算、数据挖掘有深入了解者优先;

3、熟悉Hadoop、Storm、HBase、Hive等框架者优先;

4、具备良好的团队意识及创新思维、自我激励能力,善于与人合作;

5、具有良好的表达与沟通能力以及独立思考并解决问题的能力。

大数据开发工程师岗位的基本职责 篇15

职责:

1.负责软件系统的现场实施部署交付工作;

2.参与制定系统的调整和优化方案,提高系统的健壮性和服务效率;

3.负责各个业务平台下应用系统的运维,应用部署,保证线上环境的稳定运行;

4.有限负责系统安全策略的管理与实施;

5.对Linux下各种网络服务、应用系统、监控系统等进行自动化shell脚本开发的工作,并根据项目对系统进行性能优化;

6. 负责突发性事件的快速响应和处理,解决服务器故障;

岗位要求:

1.熟练应用自动化运维管理工具;

2.熟练shell、Python脚本编程语言,有Devops相关开发经验尤佳;

3.熟悉redis、rabbitMQ、zookeeper等常用中间件的集群安装部署;

5.了解Docker或K8S, 对Openstack,VMware有实际运维经验;

6.熟悉MYSQL数据库的集群、主备环境搭建和参数调优;7.严谨细心、勤奋、责任心强并且有良好的团队合作精神 。

大数据开发工程师岗位的基本职责 篇16

职责:

1、协助开发主管/高级软件开发成员完成所负责的各种开发任务、具备良好的沟通交流和逻辑思维能力、有责任心,有团队精神,乐于帮助同事者优先

2、负责与其他开发成员一起,按时完成系统功能的各种前后台编码实施

3、负责对平台各种功能完善、 bug修复、性能优化、安全监控….问题进行修复

4、完成领导交待的其它开发任务

5、有电商平台行业开发经验者优先

岗位要求:

1、计算机或相关专业专科以上学历,1-2年JavaEE开发经验,熟悉Java、Jquery、io、多线程、集合、分布式、缓存、消息、搜索等机制……,有NodeJs、Python、LinuxShell、Html5、Android、IOS……其它开发语言经验者优先

2、具有较强的事业心、对工作认真负责、主动性强、有敬业精神,勇于面对困难和接受挑战

3、具有一定的项目开发经验、有良好的团队协作能力和沟通能力

4、 熟悉或了解使用常用开发框架,如:Spring Boot、Hibernate、Spring MVC、EasyUI、AngularJS、Require……

5、熟悉或了解常用的web server,如Tomcat、Weblogic、Websphere、JBoss、jetty……中的一种或多种

6、熟悉或了解数据库设计和优化,如Oracle、MYSQL、Redis、Solr……有NoSQL 数据库使用经验者优先

7、熟悉或了解Eclipse、WebStorm、SVN、GIT、UML、Redmine……常用工具多种或一种

8、熟悉或了解前后端开发与有良好代码规范者优先

大数据开发工程师岗位的基本职责 篇17

职责:

1. 负责设计和实现手机卫士大数据BI平台;

2. 不断完善数据产品的架构设计,应用开发和新技术迭代;

3. 配合业务,产品,根据不同的业务需求,灵活快速地完成具有挑战性的项目,为业务提供有价值的数据分析和预测。

任职要求

1. 计算机软件相关专业本科及以上学历,至少3年以上工作经验;

2. 认可技术与平台在BI的价值,能够深入业务领域,通过使用数据分析和挖据技术,让业务生成的海量数据产生更大价值。

3. 熟练掌握大数据技术:包括Hadoop,Spark,Storm,Hive,Presto,Parquet,Flink,Druid,OLAP, Elastic Search等等。

4. 具备良好的编程能力和代码风格,熟练掌握Java, Python等语言,熟练使用SQL,并具有较强的优化能力。

5. 需要有很强的开发和架构设计能力,特别是在大数据的分布式和实时处理领域,对存储引擎和查询引擎的原理和优化都具备比较深入的理解。

6. 有一定的数据挖掘和机器学习算法能力,包括推荐系统,深度学习等技术领域 。

7. 拥有正直、积极、宽容的品质,学习能力强,并且善于沟通合作。

大数据开发工程师岗位的基本职责 篇18

职责:

1、负责应用系统、数据库的运行监控,负责应用版本升级发布等系统环境保障工作;

2、负责(或协助)完善系统初始化工作;

3、负责数据迁移后的修正工作;

4、负责应用系统部分功能开发、验证测试、辅导答疑、问题处理、归纳分析等工作;

5、负责(或协调)应用系统接口调整的联调测试相关工作;

6、负责完成领导交办的其他工作。

任职要求:

1、计算机及相关专业方向;

2、1年以上工作经验,能够胜任简单的基础的开发工作;

3、了解IT系统技术问题诊断、分析、解决的基本方法;

4、具有良好的责任感和团队合作精神;

5、具有良好的协调沟通能力;

6、具有良好的归纳总结能力;

7、具有良好的抗压能力;

8、有税务行业工作经验者优先录用;

9、熟悉ORACLE、Java开发者优先录用。

大数据开发工程师岗位的基本职责 篇19

职责:

1、按照项目管理流程,进行项目相关功能模块任务的开发、分析及游戏适配等工作;

2、前端框架的设计开发和核心功能的实现,独立设计开发相应的游戏模块;

3、实现游戏逻辑、数据交互,优化内存与性能。

任职要求:

1、本科及以上学历,计算机相关专业,1年以上游戏开发经验;

2、熟悉 JavaScript/TypeScript/ActionScript语言,良好的OOP编程思想;

3、熟悉 layabox 、Cocos2d-html5、Cocos2d-js、QuarkJS、createJS等HTML5框架优先;

4、熟悉socket,http通信协议,熟悉一般常用的2D、3D图形算法;

5、有上架HTML5产品、flash游戏开发经验者优先;

6、具备良好的沟通合作技巧,较强的责任心及团队合作精神。

大数据开发工程师岗位的基本职责 篇20

职责:

负责后端的业务逻辑实现,数据持久化等的设计与开发;

根据需求开发指定的功能模块,独立地进行设计、编码和调试,保证整个系统的安全、稳定、高性能;

负责代码设计优化,提高开发效率,保证开发质量;

与其他团队成员保持良好的沟通和协作。

任职要求:

计算机相关专业本科以上学历,5年以上PHP开发经验,计算机专业优先;

精通PHP,具备OOP编程思想,熟悉设计模式和算法,深入了解PHP的性能最优化和安全化;

有高并发,高负载项目经验,具有分布式架构的代码开发能力;

具有微服务架构设计和实施经验;

精通MySQL数据库和SQL,具有优秀的数据库设计优化能力;

熟练使用redis 、memcached、MongoDB等非关系数据库,并了解其优缺点与应用场景;

了解常用开源框架或技术的原理与应用方式。如负载均衡、服务治理、异步消息等;

学习能力强,有较好的沟通能力,能迅速融入团队,较强的逻辑、抽象思维能力,具有较强产品意识者优先;

大数据开发工程师岗位的基本职责 篇21

1.Java后端开发

2.熟悉springboot+mybatis框架

3.熟悉数据库原理,熟练sql语句,有mySql数据库的经验为佳

4.有前后端分离开发,有分布式的开发经验为佳

5.熟悉linux服务器的日常操作

大数据开发工程师岗位的基本职责 篇22

职责:

1、设计并开发高并发,高计算量,大数据容量系统。

2、负责产品服务端复杂算法及数据库操作相关功能和接口分析、方案设计及技术实现

3、负责建立后端开发规范、源代码检查、重构和优化;

4、与产品/设计/前端开发/测试团队紧密合作,按时保质交付后端开发任务;

5、其它上级领导安排的工作;

职位要求:

1. 良好基础知识,熟悉常用算法和数据结构;

2. 三年以上JAVA、Golang、NodeJs等后端语言开发经验, 熟练掌握面向对象编程;

3. 具有技术钻研精神,追求完美,并具有较强自驱学习能力;

4. 同时熟练掌握mongodb及MySQL数据库开发,对关系型数据库和非关系型数据库都有深入的了解;

5. 了解微服务架构,并有一定的微服务设计经验;

6. 对高负载、大访问量情况下的系统架构的搭建、调试、排错、优化、部署等方面有一定的经验;

7. 熟悉GoLang,能够解决开发中遇到的问题优先;

8. 开源贡献者优先,github源码者优先,技术博客者优先。

大数据开发工程师岗位的基本职责 篇23

职责:

1、后端JAVA程序的设计和开发;

2、辅助进行系统需求分析和整体设计工作;

3、根据设计文档或需求说明完成代码编写、调试、测试和维护工作;

4、分析并解决软件开发过程中的问题;

5、协助测试工程师制定测试计划,定位发现的问题;

6、进行定期的code review,保证代码的可持续发展。

任职要求:

1、计算机软件或相关专业,本科及以上学历,4年以上java开发工作经验;

2、具备扎实的java基础,有一定的架构功底 ,熟悉redis、mongodb、mysql 、java高并发 ,有一定的金融技术底层设计能力

3、有spring、微服务、web等分布式开发经验 ,了解 tcp mvc springCloud

4、熟练使用 java8 tomcat git nginx redis、mongodb、mysql 消息队列、spring_cloud

5、积极主动较,强执行力和较好的沟通能力。

大数据开发工程师岗位的基本职责 篇24

职责:

1、负责大数据统计平台建设与优化;

2、负责广告效果分析,反作弊平台建设;

3、负责移动广告平台相关系统的设计研发及持续优化。

职位要求:

1、计算机或相关专业本科学历及以上,2年工作经验;

2、精通大数据采集、处理、存储、查询相关技术;

3、熟悉Hadoop/Hbase/Hive/Spark/Storm/Kafka相关技术;

4、至少熟练掌握 Java/Scala/Python 中一门语言;

5、有做过大数据量查询优化的优先;

6、有大数据服务运维、性能调优者优先;

7、熟悉常用的设计模式,对MVC框架有了解;

8、强烈的责任心,对技术充满热情,高效率,良好的沟通能力。

大数据开发工程师岗位的基本职责 篇25

1. 参与系统分析与设计,带领团队编程撰写;并负责完成核心代码测试

2. 完成公司交予的项目研发任务

3. 负责对所带领团队员工的任务分派,任务考核以及技术培训指导

4. 负责对整个项目开发进度,流程的把握,确保项目按质按量完成

5. 负责配合运营部门对产品的流程问题进行处理

6. 负责配合客户或运营部门对产品提交的改进意见进行反馈和实现

7. 负责网站运营设备及保管计算机讯息

8. 完成上级领导交办的其他任务

大数据开发工程师岗位的基本职责 篇26

职责:

1.负责ORACLE、SQLSEVER等数据库的实时数据处理、故障分析出来,性能优化等;

2.定位和解决数据集群组件性能和高可用问题,协助数据集群监控系统的开发;

3.深入探索业务数据,创造性的思考和发现问题,能够提出有效解决方案,协助新项目的预研和开发,数据驱动业务,

4.负责公司内外部各数据的接入和清洗处理。

任职资格:

1、计算机相关专业,本科及以上学历,1年以上hadoop开发经验,对分布式计算理论有深刻理解。

2、熟悉Linux开发环境,熟练Java、scala编程,有良好的编码习惯;

3、熟悉Hadoop、HBase、HIVE、Spark、KAFKA等系统相关技术原理与实现;

4、熟悉mysql、sql server、oracle开发环境,对SQL语句相当熟练,具备sql调优能力;

5、有大数据运维相关经验优先

6、具备良好的沟通能力、学习能力、分析解决问题能力;

7、英语熟练优先

大数据开发工程师岗位的基本职责 篇27

职责

1、辅助工程师负责产品java开发;

2、辅助工程师处理、协调和解决项目中出现的技术问题;

3、协助工程师处理线上版本紧急技术问题,线上版本bug处理;

4、协助工程师服务器系统优化,提高性能。

任职资格:

1、年龄19--35岁;

2、理工科、计算机相关专业,有无相关工作经验均可,可接收优秀应届生;

3、计算机、电子电气、软件工程、网络工程等理工科专业优先考虑;

4、良好的团队合作精神和高度的责任感,能够承受压力,有创新精神,保证工作质量;

5、具备良好的团队意识及创新思维、自我激励能力,善于与人合作;

6、具有良好的表达与沟通能力以及独立思考并解决问题的能力。

大数据开发工程师岗位的基本职责 篇28

职责:

1. 根据公司业务需求,进行数据开发及报表制作;

2. 参与BI、大数据平台体系建设;

3. 文档整理,包括ER图、原型设计、数据字典整理等;

岗位要求:

1. 本科或以上学历,计算机相关专业,2年及以上工作经验;

2. 熟练使用主流数据库(如ORACLE/PostgreSQL/MYSQL等),掌握SQL查询优化方法;

3. 熟悉HADOOP生态,能够熟练使用HIVE/HBASE/SPARK进行数据开发;

4. 掌握JAVA或PYTHON,会TABLEAU/KYLIN/帆软等BI工具者优先;

大数据开发工程师岗位的基本职责 篇29

职责:

1.有独立工作能力,工作踏实认真,以及较强的团队协作精神。

2.负责日志大数据平台的搭建和规划;

3.在总体架构设计下,完成日志大数据产品的设计、搭建、维护和调优,技术文档的编写与维护;

4.参与业务日志的大数据分析;

5.及时反馈开发中遇到的难点问题,沟通并寻求解决方案,按阶段有计划地完成开发任务

任职资格:

1、计算机等相关专业本科以上学历,2年以上开发经验;

2、熟悉 linux 操作系统,熟悉 shell 脚本语言,精通 Java,有较强的开发能力;

2、熟练使用SQL,熟悉Mysql、MongoDB、Hive等数据库技术的基本操作及原理;

3、熟悉Hadoop/Spark生态系统组件的使用,至少有1年的Spark(Core/Streaming/SQL)开发经验;

4、熟悉Elastic产品线(如 Elasticsearch、Kafka、Kibana、Logstash)的使用方法,了解常见优化方案,熟悉Elasticsearch部署、监控及性能调优;

5、熟悉数据挖掘、机器学习、网络数据分析等技术优先;