首页 > 实用范文 > 办公文秘 > 岗位职责 > 大数据运维工程师的职责汇编29篇正文

《大数据运维工程师的职责汇编29篇》

时间:

大数据运维工程师的职责(通用29篇)

大数据运维工程师的职责 篇1

职责:

1、配置游戏运行环境,安装部署游戏;

2、游戏服务器的规划、监控,数据备份,日志分析,故障排除,性能调优等工作;

3、研究运维相关技术,根据系统需求制定运维技术方案;

4、研究系统架构、提高系统的健康性,参与运维流程制定、保证高效响应。

技能要求

1、3年以上的游戏运维经验,中大型手/页游及以上运维经验优先;

2、精通Nginx+MySQL+PHP的配置、使用、调优;

3、熟练使用cacti、zabbix、nagios等常用监控工具;

4、熟悉Shell编程,熟悉Python和PHP优先;

5、熟悉K8S集群、ansible、SaltStack等一个自动化运维工具二次开发;

6、有较强的学习能力,热爱系统管理工作,有高度的责任心。

大数据运维工程师的职责 篇2

职责:

1、负责大数据平台Hawq数据库运维;

2、负责大数据平台Tbase数据库运维;

3、负责传统数据(Oracle、MySQL等数据库)数据迁移、数据同步;

4、负责日常数据库的监控及问题分析排查;

5、负责OGG、Kafafa等组件数据传输同步日常运维;

6、负责数据库的优化、SQL语句的优化调优;

7、负责数据同步的检验与异常处理,确保数据的一致性、完整性、及时性;

8、负责制定数据同步方案及实施。

任职要求:

1、大专或以上学历,计算机或统计类相关专业

2、有3年以上技术类或数据类的开发经验;

3、熟练linux 系统操作及linux 运维监控、软件安装配置;

4、熟悉大数据技术,如Hadoop、Spark、storm、zookeeper等;

5、熟悉主流数据库mysql/sql serverl/oracle/postgreSQL等,精通SQL语句,对复杂SQL能进行优化,能熟练编写存储过程;

6、熟练Linux SHELL,可以进行运维SHELL开发;

7、学习能力强,责任心强,具有优秀的沟通表达、理解能力与团队合作能力;

8、有CentOS 7、Red Hat 7等Linux操作系统,有Shell脚本编写经验的优先。

9、有3年以上的基于MPP(greenplum ,HAWQ,Vertica,GBASE等MPP DB)数据仓库的实际运维经验或3年以上 HIVE、SPARK 实际项目运维经验

10、在实际项目中,有异构数据库迁移经验,从传统ORACLE,MYSQL迁移至MPP数据仓库的实战经验.

大数据运维工程师的职责 篇3

职责:

1.公司IT桌面工作支持

2.公司数据中心日常巡检和维护管理;

3.公司IT资产管理维护

4.公司网络设备和电话系统日常维护

5.公司windows和linux 服务器安装配置;

任职资格:

1.熟悉主流操作系统的安装和维护,有linux操作系统安装配置经验;

2.熟悉IT软硬件的安装维护;

3.熟悉网络知识,能够处理局域网网络故障;

4.良好的服务意识,耐心,性格开朗、积极主动;

5.具有IT安全意识,细致,较高职业素养;

6.良好的主动沟通交流能力,和问题反馈能力;

7.有1-2年的IT 企业工作经验;

8.具有一定英文读写能力;

大数据运维工程师的职责 篇4

1. 负责Hadoop及相关组件的部署和维护,保证其稳定运行;

2. 开发和使用Hadoop大数据自动化运维与监控工具;

3. 基于大数据应用需求,不断调整和优化Hadoop框架及组件的配置,提升性能;

4. 为数据仓库、数据挖掘建模等数据应用项目提供运行环境支持;

大数据运维工程师的职责 篇5

1、负责ERP、CRM等应用系统维护;

2、对接业务部门,负责各类信息系统问题的分析和解决,做好衔接协调工作;

3、根据公司管理需求,参与软件项目实施工作;

4、完成部门领导要求的其他任务

大数据运维工程师的职责 篇6

职责:

1负责政务云平台、政务应用系统中数据库业务的日常运维,保障平台及应用系统服务7*24稳定可靠高效运行

2负责数据库性能调优,了解锁与隔离机制,协助客户解决数据库性能瓶颈

3制定数据库使用规范,制定数据库备份、升级、迁移规划并部署实施

4参与数据库设计工作,提高数据库维护自动化水平

5熟悉Linux操作系统,熟练使用Python,Go,Shell等至少一种语言

岗位要求:

1) 5年以上 Oracle/MySQL DBA 从业经验;

2) 熟练掌握 Oracle/MySQL 数据库的基础理论知识、运行机制、体系架构、高可用方案、备份机制、容灾机制等;

3) 熟练掌握数据库性能优化,了解主流的分布式数据库 Spanner/Cassandra;

4) 熟悉 Linux/Unix 操作系统,对服务器硬件有一定了解;

5) 熟练掌握 golang、Python、Java 等语言中的一种;

6) 熟悉阿里云产品线,具备ACP认证者优先考虑;

大数据运维工程师的职责 篇7

职责:

负责运维平台的开发,推进自动化运维体系建设

负责制定运维流程,负责运维技术文档编写

负责新技术架构测试研究,推动架构和部署优化

参与公司私有云建设规划

职位要求:

计算机相关专业,3年以上linux系统运维工作经验

熟练使用python,至少熟悉一种web框架flask/django/tornado框架

具有持续集成和持续交付经验,熟悉Jenkins等工具

熟悉saltstack,ansible等配置管理工具,并能进行二次封装开发

具有网络/系统/web安全等方面的理论基础,具备恶意代码检测、入侵检测,安全漏洞分析能力

具有良好的文档编写习惯和技术分享意识

熟悉容器技术虚拟化技术者优先

大数据运维工程师的职责 篇8

职责:

1、负责数据中心(windows、linux环境下)建设、运维工作;

2、根据相关服务器、数据库建设需求,制定方案;

3、负责NC-ERP系统账套备份、恢复、补丁管理(Oracle数据库);

4、网络设备采购及维护,对网络设备供应商询价、考察、选型并采购;

5、网络系统、网络安全的建设与维护,机房弱电井5S管理。

任职资格:

1、本科以上学历,计算机相关专业;

2、3年以上同岗位工作经验;

3、具有基本电脑维护知识、网络管理和网络安全知识、路由技术和交换技术

4、精通网络应用的建设过程、精通Linux服务器系统、熟悉Windows服务器系统

大数据运维工程师的职责 篇9

职责:

1.使用持续集成工具软件进行应用版本发布、备份、部署、监控等;

2.负责应用系统日常上线、维护巡检,编写运行报告;

3.及时响应并快速定位故障,保障线上业务 724稳定运行;

4.负责收集日常使用过程中出现的问题,协助对应的产品、研发部门分析、排查和解决;

5.负责外部信息对内的知会,内部需求讨论结果对外的反馈;

6.通过对日常问题的分析汇总编写分析报告,优化工作流程、提升工作效率和服务质量;

岗位要求:

1.统招全日制专科以上,计算机、通信或相关专业,1年以上相关技术岗位工作经验。

2.熟悉linux系统和操作命令;了解简单的shell/ant/python等脚本的编写。

3.熟悉一般的网站架构,熟悉Apache、JBoss、Tomcat等常用工具软件。

4.了解 git/svn 等源代码配置软件,会使用 jenkins+ant+shell进行编译发布、代码打包等。

5.良好文字功底及沟通协调能力,强烈的责任心和团队合作意识,能承受较高强度的工作压力。

6.具备应用平台运维、linux运维、网站运维等经验者优先考虑;了解民航订座或离港知识的优先考虑。

大数据运维工程师的职责 篇10

职责:

1.服务器维护和监控,日常数据备份,编写维护脚本;

2.工作终端、打印机、扫描仪、无线路由器等IT资产的硬件、软件安装部署、维护管理;

3.快速解决办公环境下网络瘫痪,设备异常故障,在需要时可以进行基本的维修。对各部门提供IT技术支持,并积极主动配合各部门快速解决问题;

4.负责用友ERP-U8系统的维护与管理

5.负责配合各软件系统与供应商的协调、沟通,及时配合各部门解决软件系统存在的问题,确保各部门的正常使用。

6.完成领导交办的其他工作任务

任职要求:

1.大专及以上学历,计算机电子等相关专业,有用友新道培训经历者优先考虑

2.有1-2年ERP用友U8系统管理与维护工作经验者优先考虑

3.熟练掌握windows、Linux等主流操作系统的安装、日常管理、故障处理等技能

4.熟悉SQL Server、Oracle、MySQL数据库者优先考虑

5.熟悉计算机日常工作相关软、硬件及网络环境设备

6.有较好的沟通能力,团队协作能力,执行力,工作责任感,工作细心耐心

大数据运维工程师的职责 篇11

职责:

1、负责公司大数据平台的部署、管理、优化、监控报警,保障平台服务7*24稳定可靠高效运行;

2、深入理解公司大数据平台架构,发现并解决性能瓶颈,支撑业务和数据量的快速增长;

3、开发大数据自动化运维、监控报警、故障处理相关脚本和工具;

4、负责Hadoop/spark/Mysql等集群服务、业务监控、持续交付、应急响应、容量规划等。

任职要求:

1、3年以上互联网运维相关工作经验,2年以上大数据平台运维相关工作经验;

2、具备一定的故障排查能力,有良好的技术敏感度和风险识别能力,精通一门以上脚本语言(shell/python等),熟悉Http/Https、TCP/IP、SMTP等协议;

3、熟悉Hadoop大数据生态圈,包括但不限于CDH/HDFS/YARN/Hive/Hbase/Kafka/zookeeper/Spark/Flume/Impala/Hue/Sqoop/Elasticsearch/kibana/MySQL/Oracle等;

4、熟悉Hadoop各组件的原理和实现,有实际部署维护、管理( 包括元数据管理)及优化经验。并拥有持续调优能力,运维管理过大规模数据平台;

5、熟悉 Kubernetes(K8s) 集群 Docker 在大数据环境场景的使用;

6、熟悉Linux(redhat/centos)软硬件环境、系统管理和优化,熟练部署、优化各种常用服务

7、有Java开发经验和阅读源码能力者优先。

大数据运维工程师的职责 篇12

1、负责用户桌面运维(Helpdesk),包括电脑、显示器、外设、电话、打印机、监控、门禁系统、视频会议设备的维护、巡检、盘点

2、负责网络设备及线路的维护、监控、盘点、故障登记及处理

3、负责操作系统的重装、Ghost镜像封装、软件安装、网络配置、病毒查杀、标准化

4、负责接收用户提交的桌面故障和服务请求、快速响应和处理,提供高质量的服务

5、对公司内部人员进行日常IT培训,提升员工电脑操作水平

6、撰写常见的故障处理方法(FAQ)、操作指引、知识库等

7、参与对机房、网络设备、服务器的日常巡检、维护 8、完成领导交办的其他事务工作

大数据运维工程师的职责 篇13

职责:

- 负责局点大数据平台的部署、管理、优化、监控报警,保障平台服务7*24稳定可靠高效运行;

- 深入理解公司大数据平台架构,发现并解决性能瓶颈,支撑业务和数据量的快速增长;

- 开发大数据自动化运维、监控报警、故障处理相关脚本和工具;

- 负责Hadoop/spark/Kafka等集群服务、业务监控、持续交付、应急响应、容量规划等。

要求:

- 4年以上运维相关工作经验,有大数据平台运维相关工作经验优先;

- 具备一定的故障排查能力,有良好的技术敏感度和风险识别能力,精通一门以上脚本语言(shell/python等),熟悉Http/Https、TCP/IP、SMTP等协议;

- 熟悉Linux(redhat/centos)软硬件环境、系统管理和优化,熟练部署、优化各种常用服务。熟练使用Linux 命令和常用的ssh、ftp、git、maven等开发工具;

- 熟悉Hadoop大数据生态圈,包括但不限于CDH/HDFS/YARN/Hive/Hbase/Kafka/zookeeper/Spark/Flink/Impala/Elasticsearch/kibana/MySQL/Kubernetes等;

- 熟悉Hadoop各组件的原理和实现,有实际部署维护、管理( 包括元数据管理)及优化经验。并拥有持续调优能力,运维管理过大规模数据平台;

- 熟悉掌握常用的安全协议和组件服务,对hadoop各组件的权限、安全、kerberos进行配置管理。熟悉SSL、ACL、kerberos等在大数据环境场景的使用;

- 熟悉常用运维监控工具(nagios/ganglia/zabbix/grafan/openfalcon等)和相关插件的开发。比如邮件、短信、微信报警插件等;

- 熟悉常用nginx/haproxy/varnish/netscaler等代理工具的使用和优化;

- 具备良好的服务意识,善于主动思考,自我驱动力强。有良好的沟通、协调能力,富有团队精神,有较强的文档编写能力;

- 有大数据开发经验和阅读源码能力者优先

大数据运维工程师的职责 篇14

职责:

1、负责银行各类应用系统的运维标准制定和运维管理等工作;

2、负责银行各类应用系统的运行情况及相关技术的整理、分析和总结等工作;

3、负责银行各类应用系统的应用监控、应用运维体系工具的建设和维护工作;

4、负责银行各类应用系统的自动化脚本编写和测试工作。

招聘要求:

1、全日制一本以及以上学历,理工类专业;

2、具备2年及以上应用系统运维或应用系统开发经验,有银行应用系统运维或开发经验者优先;

3、具备较强的文档编写、英语文档阅读能力;

4、具备良好的沟通表达能力和团队合作精神,具有较强的工作责任心和主动性;

5、至少具备以下二项技能:

(1)熟悉银行应用系统体系架构、应用运维标准化流程;

(2)熟悉AIX、LInux操作系统相关运维工作,具备熟练的SHELL脚本编程能力;

(3)熟悉应用软件持续集成和持续发布交付项目的整体流程,熟悉Jenkins、Nexus等相关Devops工具;

(4)熟练使用容器平台相关技术,有容器平台管理工作、应用容器打包的相关经验;

(5)熟练使用Golang或者Python编程。

大数据运维工程师的职责 篇15

职责:

1、对大气环境方面客户提出问题做好做好台账管理工作并跟踪问题解决;

2、管理大气环境客户相关信息归档资料维护与更新;

2、负责大气环境方面平台的日常运维,数据库备份工作;

3、客户提出仪器数据接口、数采软件问题做诊断,分析,解决。

任职资格:

1、计算机相关专业背景,本科以上学历;优秀应届毕业生亦可;

2、对IT运维项目管理及实施有兴趣;

3、有网络、系统、SQL Server数据库、软件等方面的基础知识,有工作经验者优先;

4、良好的客户服务意识和优秀的沟通表达能力,抗压能力强,能适应出差;

5、较强的责任心、具有良好的团队合作精神;

6、良好的自我学习、独立处理问题能力。

大数据运维工程师的职责 篇16

职责:

1、配合公司对相关设备定期做巡检工作;

2、负责对电脑的日常维护;

3、负责对应用服务器的日常运行与维护;

4、负责对客服软件及操作系统的日常检查和维护,及时解决发现问题;

5、周期做数据备份,测试数据备份的正确性和完整性,以增强服务器的安全性。

任职资格:

1、专科或以上学历,

2、较强的语言沟通能力和文档编写能力;

3、能够使用SQL语言实现数据库操作优先考虑;

大数据运维工程师的职责 篇17

职责

1, 为客户提供技术支持和维护

2, 客户关系的维护及拓展

3, 弱电项目实施

4, 机房Linux服务器日常巡检

5, 客户现场网络设备故障排查

7, 上级安排的其他工作

任职资格

1,熟悉HP、IBM、DELL等品牌服务器的安装、故障排查;

2,熟悉windows server,Linux,VMware等操作系统及HA配置;

3,熟悉IBM、HP、EMC等品牌存储以及相关产品的配置与调试;

4,熟悉交换机、路由器、防火墙等网络设备的安装配置;

5,大专以上学历,计算机、通讯或相关专业毕业,3年以上技术服务工作经验

6,抗压能力强、高度责任心、对工作有认同感,良好的服务意识,学习能力强,实操能力强。具有团队协作精神,良好的沟通交流能力。

7,有机房运维经验的优先

大数据运维工程师的职责 篇18

职责:

1、 驻客户现场负责应用系统日常运维,响应并处理事件和问题;

2、 应用系统的使用指导和系统数据维护管理工作;

3、 维护客户关系,对客户的要求及时响应和反馈,协助客户进行应用系统管理

4、 负责完成上级交办的其他工作。

职位要求:

1、 大专及以上学历,计算机相关专业,1年以上的运维工作经验;

2、 性格开朗,有较强的沟通、表达及逻辑分析能力,具备较强的学习能力,较强的适应能力,善于主动思考问题,创新性强;

3、 工作踏实认真、有责任心、具备良好的服务意识;

4、 了解oracle,mysql数据库,熟练使用常用的sql语言;

5、 了解各类中间件的使用,如tomcat,weblogic等;

6、 熟悉运维服务管理相关流程者优先;

大数据运维工程师的职责 篇19

职责:

1、负责公司网站所需美工的设计,更新等工作。

2、根据公司产品宣传推广的要求能独立完成与设计有关的工作。

3、与开发人员配合完成网站等前端页面设计和编辑。

4、配合公司需求完成,图片等等宣传广告制作。

5、网站服务器的日常维护。

任职资格:

1、具备一定美术基础和文字功底,能熟练运用Photoshop、Illustrator、

Flash、After Effects等设计软件;

2、熟悉广告行业的喷绘、写真、雕刻、印刷等基本制作知识;

3、对服务器及网络架构有一定的了解。

4、专科以上学历。

大数据运维工程师的职责 篇20

职责:

1、 负责公司平台架构的规划和设计,保证系统的高可用性和扩展性,对系统的性能进行分析和优化,以及对系统架构提出合理的改进建议,提高线上平台运行的稳定性。

2、 参与设计和优化监控报警系统,优化监控项,且从业务层面监控整个平台,做到监控及时告警,告警自动处理的目标,定时收集监控相关数据,对业务系统进行分析和调优,确保生产系统的告警信息能及时发出,相关人员能够及时收到。

3、 负责持续集成和交付工作,参与自动化平台的建设,负责开发高效的自动化工具或平台,建立自动化运维体系,提升运维工作效率,提高版本持续交付的效率。

4、 负责各个业务测试环境、预发布生产环境、生产环境的系统安装和应用部署等运维工作,包括配置管理、版本升级、故障处理等。

5、 参与公司运维体系、运维流程、运维规范、安全的制定及实施,编写业务架构、linux知识、技术文档、安全文档等知识库体系,确保运维操作规范、安全、效率。

6、 负责日志监控系统的搭建,根据需求对日志监控系统进行实现、调试,并解决和优化系统的部署问题,确保日志系统的稳定运行。

任职要求

1、精通Centos/RedHat等操作系统,熟悉TCP/IP协议原理;

2、精通haproxy、Nginx、tomcat、keepalived、redis、rabbitmq、zookeeper、mysql等基础原理;

3、精通常用缓存,如Memcached、Redis、Squid、varnish等服务的基础原理;

4、精通shell语言,熟练使用sed、awk等命令,有python编程经验优先;

5、熟悉docker容器的知识,了解并熟悉k8s、swam、mesos容器编排工具的基础架构;

6、精通至少一种配置管理工具,如puppet、saltstack、ansible等;

7、熟练掌握ELK日志监控系统的配置和优化;

8、掌握linux环境下nagios、cacti、zabbix等常见的监控系统的配置和管理;根据监控数据对业务系统进行调优和维护;

9、熟练搭建和配置MFS、ceph、GlusterFS分布式存储架构,并且有一定的优化经验;

大数据运维工程师的职责 篇21

职责:

1、负责公司关务、货代、仓库等日常系统运维;

2、负责系统异常处理以及与软件工程师反馈;

3、负责相关操作文档的编制,辅助、培训用户正确安装、使用计算机及应用软件;

4、负责公司日常办公相关软件以及系统安装等相关运维。

岗位要求:

1、本科及以上学历,计算机/数学相关专业;

2、有仓储物流行业信息化运维工作经验者优先;

3、具有较强逻辑思维能力,解决能力和较强的问题总结能力;

4、具有吃苦耐劳精神,工作积极热情,责任感强,良好的团队合作精神及沟通表达能力。

大数据运维工程师的职责 篇22

职责:

1.负责大数据业务集群的运维工作(Hadoop/Hbase/Hive/ Yarn/ Spark/ Storm/ ES等大数据生态圈组件)确保高可用性。

2.负责集群容量规划、扩容及性能优化;

3.参入建设大规模分布式集群的运维、监控和管理平台;

4.参与业务架构设计,在设计阶段给出可运维性改进建议;

5.深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的大数据运维技及发展方向。

任职要求:

1.三年及以上大数据运维工作经验,熟悉hadoop、hbase、hive、Solr、ES等分布式相关技术,熟悉源码尤佳,至少掌握java/python/shell中的一种语言。

2.了解大数据平台应用架构,具备常见问题的基本分析和解决能力。

3.熟悉Linux操作系统的配置、管理及优化,能够独立排查及解决操作系统层面的问题;

4.熟悉nginx、tomcat等web应用及中间件的使用和配置

5.强烈的责任心和使命感,执行力强,富有团队合作精神;

6.对大数据方向运维有很高的热情和兴趣,能主动学习了解相关知识;

大数据运维工程师的职责 篇23

职责:

1. 负责阿里云平台的ECS服务器与RDS数据库的安全和维护工作;

2. 从网络安全、主机安全和数据安全、电子交易等安全层面进行网络拓扑设计;

3. 对现有运行网站的系统制定安全审计、维护制度,并监督执行;

4. 配合技术总监,共同组建完整的互联网安全防护措施;

5. 负责公司员工电脑的技术支持(如解决网络、邮箱配置、病毒查杀、办公软件排错等)

6. 负责公司各类终端机、打印机、扫描仪等外设的维护。

任职要求:

1.沪籍,男,大专以上学历,计算机应用技术、计算机网络技术及其相关专业,5年以上工作经验;

2.计算机基础知识扎实,对各种电脑软件、硬件的安装和维护有良好的经验;

3.熟悉主流服务器、云服务器配置及网站部署中间件(IIS/Apache/Nginx),熟悉Windows Server、Linux系统,路由器等网络设备,并了解网络设备调试使用;

4.熟悉TCP/IP协议和网络安全体系,对于企业局域网搭建有一定的经验;

5.熟悉SQL Server/Oracle基本语法,对互联网编程语言有一定的了解。

大数据运维工程师的职责 篇24

职责:

1、负责公司计算机、打印机等软硬件设备的配置、维护与管理,保障日常工作正常运行;

2、负责应用系统的部署,更新,优化等工作;

3、负责应用服务故障的排查与解决,编制和汇总故障处理经验;

4、负责应用系统的日常监控。编制和汇总服务器状态性能报告;

5、负责运维文档的编写与归纳;

任职要求

1、计算机相关专业本科及以上学历;

2、具备优秀的计算机软、硬件知识。并具备快速判断和解决故障的能力;

3、三年以上Linux系统管理、网络管理及应用跨平台部署等相关工作经验;

4、熟练掌握主流的Web应用软件的配置和优化,并且有自动化运维经验,能够编写日常运维脚本;

5、精通shell/perl/php/python中的一种或两种编程语言;

6、熟练掌握各类开源监控系统(nagios,cacti,zabbix,puppet)的安装和使用;

7、三年以上MySQL、mongodb、redis等数据库使用经验,精通sql语句;

8、能够独立分析问题、解决问题,具有较强的学习能力,有较强的责任心,善于团队交流与合作;

大数据运维工程师的职责 篇25

职责:

1.负责弱电集成系统日常维护,解答客户提出的技术问题,负责产品工程安装,包括产品安装调试,故障排除,日常维护,产品演示等;

2.负责用户培训和指导等技术支持工作;收集、汇总用户的各种需求或建议,并及时提交需求任务或建议措施;

职位要求:

1、计算机、网络相关专业,大专以上学历,有技术支持服务工作经验者优先;

2、熟悉企业it环境,包括网络,操作系统,应用程序等,有华为、cisco等认证证书优先;

3、良好的沟通能力,有亲和力和强烈的责任感,以及很好的团队合作精神,具备独立分析问题和解决问题的能力。

4、具有较强的服务意识,时间观念、耐心和责任心、良好的团队合作精神。

大数据运维工程师的职责 篇26

职责:

1. 负责公司核心集群的运维工作, 任务调度、监控预警,持续完善大数据平台,保证稳定性、安全性;

2. 负责集群容量规划、扩容及集群性能优化;

3. 基于大数据应用需求,持续优化Hadoop框架及组件的配置,提升性能;

任职资格:

1.大专以上计算机,通信和网络相关专业;

2.3年以上中等规模集群环境下的Hadoop/Impala/Hive/Spark集群相关运维经验;

3.对各种HDFS/Yarn/Hive/Impala/Spark/Hbase等相关参数调优, 性能优化等有实际经验;

4.有实际踩坑经历, 对于相关组件的版本跟进, 补丁跟踪, bug追踪等有相关经验;

5.实际处理过各种集群在线版本升级, 数据迁移, 集群扩容, 稳定性监控等工作;

6.熟悉Kerberos安全认证系统,实施过集群权限管理, 资源隔离方面的方案规划或二次开发工作;

7.能维护Hadoop源码,有Hadoop 源代码BUG修复或者源代码优化经验者优先;

8.有Cloudera的CM使用经验尤佳。

大数据运维工程师的职责 篇27

职责:

1、负责公司软硬件系统的日常维护及管理工作并及时解决相关技术问题,了解监控系统、综合布线、广播系统、门禁等;

2、负责集团网络的管理及维护,确保通讯顺畅、系统稳定;

3、负责局域网络搭建及维护,对用户终端提供相应的技术支持;

4、总部机房管理,日常服务器维护检查运维等。

任职资格:

1、电子信息,计算机等相关专业、可接受应届生实习生;

2、掌握常用网络及通讯设备的安装及配置,具备良好的动手能力和排障能力,较强的学习能力。

3、具有较强的沟通协调能力、团队意识、吃苦精神以及责任心;

4、良好的语言表达能力,沟通能力,能够适应出差安排。

大数据运维工程师的职责 篇28

职责:

1、负责物理服务器和云服务器的运维,能够对系统故障进行独立的判断;

2、负责对系统性能扩容评估、熟练掌握对服务器和网络设备的监控、报警;

3、配合部门响应客户的故障申报,配合完成故障处理;

4、领导交办的其他工作。

职位要求:

1、全日制本科毕业,至少3年以上相关工作经验,有rhce证书的优先;

2、熟练使用linux服务器(centos和ubuntu)的配置和管理、脚本及自动化配置工具;

3、熟悉linux服务器VPN搭建、常见的虚拟化操作平台(EXSI&KVM)、主流的监控系统(zabbix,cacti等)的搭建和使用;

4、具有良好的客户服务意识、较好的沟通能力和团队精神;

5、有linux运维开发经验的优先;

大数据运维工程师的职责 篇29

职责:

1.服务器及应用的安装、部署、维护、更新、监控等;

2.服务器相关资产管理;

3.负责处理平服务器台各类故障,问题快速定位和解决;

4.服务器日常运维,应用等自动化、标准化、平台化;

5.领导安排的其他相关工作。

职位要求:

1.本科及以上学历,,具有2年以上Linux运维经验,计算机、通信、信息技术等相关专业。

2.熟悉主流硬件,服务器DELL、HP、IBM等。对UNIX/Linux等操作系统有一定了解;

3.有安装调试服务器的经验,包括机架式服务器上架,做硬件raid,安装操作系统等;

4.至少熟悉一种自动化运维工具,Ansible、 Puppet、SaltStack,无人值守Kickstart等;

5.至少熟悉一种虚拟化云平台技术,vmware,kvm,citrix,xen,openstack等;

6.良好的沟通能力、学习能力、团队意识、积极的工作态度;