《大数据运维工程师的岗位职责.docx》由会员分享,可在线阅读,更多相关《大数据运维工程师的岗位职责.docx(33页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、大数据运维工程师的岗位职责大数据运维工程师的岗位职责(通用20篇) 大数据运维工程师的岗位职责 篇1 职责:负责公司大数据业务集群的运维工作、集群容量规划、扩容及性能优化;设计实现大规模分布式集群的运维、监控和管理平台;参加业务架构设计,在设计阶段给出可运维性改进建议;深化探讨大数据业务相关运维技术,持续优化集群服务架构,探究新的大数据运维技及发展方向;负责公司大数据平台的应用监控、容量管理,应急响应等;领导支配的其他工作。任职要求:1、本科及以上学历,软件工程、计算机等相关专业;2、熟识计算机原理、网络原理等学问;至少2年以上运维或开发工作阅历;3、搭建,管理及调优Hadoop/HBase/
2、Hive/Flink/Spark/Kafka/Elasticsearch/Flume等开源项目优先;4、至少驾驭java/python/go中的一种语言;5、熟识HBase/Flink/mysql/redis运维优先;6、熟识zabbix/graphit/grafana加分;7、具有很强的分析和解决问题的实力;8、具有攻克难题的剧烈爱好,以及提升技术实力的意愿;9、擅长主动学习,责任心强,能够承受较大的工作压力。 大数据运维工程师的岗位职责 篇2 职责:1. 负责公司核心集群的运维工作,保证其高可用和稳定性。2. 负责集群容量规划、扩容及集群性能优化。3. 深化探讨大数据业务相关运维技术,持续
3、优化集群服务架构,探究新的Hadoop运维技术及发展方向。4. 设计实现分布式集群的运维、监控和管理平台。职位要求:1.2年以上中等规模集群环境下的Hadoop/Impala/Hive/Spark集群相关运维阅历。2.对各种HDFS/Yarn/Hive/Impala/Spark/Hbase等相关参数调优, 性能优化等有实际阅历。3.有实际踩坑经验, 对于相关组件的版本跟进, 补丁跟踪, bug追踪等有相关阅历。4.实际处理过各种集群在线版本升级, 数据迁移, 集群扩容, 稳定性监控等工作。4.熟识Kerberos平安认证系统,实施过集群权限管理, 资源隔离方面的方案规划或二次开发工作。5.有C
4、loudera的CM运用阅历尤佳。 大数据运维工程师的岗位职责 篇3 职责:1、负责公司服务器日常的维护,包括巡检、故障解除、数据备份等业务,保证服务器高质量、高效率运行状态;2、负责公司大数据产品的现场实施,制定牢靠的实施方案;3、负责公司大数据环境(hadoop生态)集群环境安装、维护、部署、优化;【任职资格】1、至少2年服务器、大数据集群运维阅历;2、精通linux运维吩咐,熟识Linux的维护和管理,熟识Shell脚本开发,能看懂Python/Scala优先;3、熟识大数据项目实施:包括不限于hadoop、hive、kafka、hbase、spark、Kudu、Impala等大数据生态
5、的平台搭建,监控,运维,调优、生产环境;4、熟识docker技术优先;5、娴熟运用git版本限制,jenkins持续集成工具优先;6、具备剧烈的进取心、自我学习实力,良好的沟通实力和团队合作意识。 大数据运维工程师的岗位职责 篇4 职责:1.负责公司大数据业务集群的运维工作(Hadoop/Hbase/Hive/Presto/Yarn/Spark/Storm/Kafka/Elasticsearch/Flume等)确保高可用;2.负责大数据平台的日常部署、升级、扩容、迁移;3.设计实现大规模分布式集群的运维、监控和管理平台;4.参加业务架构设计,在设计阶段给出可运维性改进建议;5.深化探讨大数据业
6、务相关运维技术,持续优化集群服务架构,探究新的大数据运维技及发展方向;6.兼顾应用系统的运维工作。任职要求:1.要求驾驭java、shell语言,有Spring Cloud微服务架构开发阅历的优先;2.了解Docker,可以做简洁应用;3.熟识Hadoop/Hbase/Hive/Storm/Spark/Kafka/Elasticsearch/Flume等开源项目优先;4.熟识Linux操作系统的配置、管理及优化,能够独立排查及解决操作系统层面的问题;5.驾驭puppet、kerberos应用的优先;6.良好的客户服务意识,剧烈的责任心和使命感,执行力强,富有团队合作精神;7.对大数据方向运维有
7、很高的热忱和爱好,能主动学习了解相关学问; 大数据运维工程师的岗位职责 篇5 职责:1、负责公司大数据平台的部署、管理、优化、监控报警,保障平台服务7*24稳定牢靠高效运行;2、深化理解公司大数据平台架构,发觉并解决性能瓶颈,支撑业务和数据量的快速增长;3、开发大数据自动化运维、监控报警、故障处理相关脚本和工具;4、负责Hadoop/spark/Mysql等集群服务、业务监控、持续交付、应急响应、容量规划等。任职要求:1、3年以上互联网运维相关工作阅历,2年以上大数据平台运维相关工作阅历;2、具备肯定的故障排查实力,有良好的技术敏感度和风险识别实力,精通一门以上脚本语言(shell/pytho
8、n等),熟识Http/Https、TCP/IP、SMTP等协议;3、熟识Hadoop大数据生态圈,包括但不限于CDH/HDFS/YARN/Hive/Hbase/Kafka/zookeeper/Spark/Flume/Impala/Hue/Sqoop/Elasticsearch/kibana/MySQL/Oracle等;4、熟识Hadoop各组件的原理和实现,有实际部署维护、管理( 包括元数据管理)及优化阅历。并拥有持续调优实力,运维管理过大规模数据平台;5、熟识 Kubernetes(K8s) 集群 Docker 在大数据环境场景的运用;6、熟识Linux(redhat/centos)软硬件环
9、境、系统管理和优化,娴熟部署、优化各种常用服务7、有Java开发阅历和阅读源码实力者优先。 大数据运维工程师的岗位职责 篇6 职责:1、负责公司嬉戏及相关网络产品线上系统的部署、调试、升级、优化等工作;2、负责线上系统的监控,故障处理;3、负责各类数据备份、复原、检查工作;4、参加产品的系统、网络规划及后期日常运维,包括系统优化、平安检测和维护、紧急事响应等;5、产品相关后台管理系统的技术需求收集、整理及文档撰写,并帮助开发人员进行系统实现;岗位要求1、3年以上互联网产品的系统运维阅历,大专及以上学历;2、精通Linux操作系统的运用与维护,精通linux各种常用吩咐,并能用Shell脚本语言
10、编程;3、深化理解TCP/IP的通讯原理,驾驭各种路由协议的技术原理及部署方式,熟识VPN、防火墙、NAT等网络技术和应用;4、了解开源网络监控管理软件(cacti、zenoss、Nagios等)的基本原理和部署方式;5、娴熟Apache/Nginx/Mysql/PHP/DNS等常见服务的安装部署、日常运维和优化;6、熟识Redis/Codis/MongoDB/MyCAT/Elasticsearch/Kafka/RabbitMQ 集群部署阅历者优先;7、拥有大型网游/网络云平台应用及运维工作阅历者优先; 大数据运维工程师的岗位职责 篇7 职责:1.负责公司服务器相关工作的业务沟通、容量规划、资
11、产管理、备份、调优等工作2.对接供应商,负责公司服务器的安装部署、日常管理维护及日志的监控与分析3.对接供应商,负责公司服务器7x24的刚好故障分析和解除4.负责公司服务器运维手册,制定运维安排、操作规范、应急手册等资料编写5.负责监控检查系统软件、服务运行状态和操作记录并进行具体的数据化记录定期汇总并上报给负责人6.部门负责人交代的其他服务器相关事情职位要求:1.全日制专科及以上学历计算机相关专业1年以上相关工作阅历2.精通LINUX/WINDOWS操作系统的安装、配置以及运维吩咐和工作能够娴熟排查运维过程中出现的服务故障、系统故障、网络故障3.能够独立完成本地和云服务器(WINDOWS、L
12、INUX)的日常管理如配置、调试、实施、维护、病毒防卫等工作4.有较强的沟通协调实力及高度责任心5.有常见中间件、数据库运维阅历者优先 大数据运维工程师的岗位职责 篇8 职责:1,负责应用系统日常维护,资源的安排、规划、管理。2,保障各主机硬件平台和运行环境的稳定;3,负责各硬件平台及应用系统的应急响应和故障的刚好处理;4,解答用户询问,解决用户运用系统中的日常问题;5,运维日志收集,运维文档编写等日常工作;确保系统24x7稳定运行。任职要求:1,计算机相关专业,大专及以上学历;2,具有良好的沟通表达实力,独立问题分析和解决实力;3,熟识Linux系统;熟识 Apache、NginX、tomc
13、at等常用服务的安装、配置和维护;熟识数据库的简洁操作;4,具备项目文档、技术文档的编写实力;5,有大型OA系统运维阅历或开发转运维优先。 大数据运维工程师的岗位职责 篇9 职责:1、 负责客户内网建设和管理,进行网络架构的规划、设计、调整、性能优化;2、 网络环境的管理,配置,排错,维护;3、 网络设备的安装、配置、管理,供应网络设备维护方案;4、 网络平安,网络质量及网络设备的监控;5、 建立完整的网络系统文档;6、 帮助办公网络环境的维护,终端设备的维护。任职要求:1、 具备良好语言表达实力和沟通实力,本科及以上学历, 3年以上相关阅历,对网络建设有深化了解;2、 熟识网络技术,有网络配
14、置、调试阅历;3、 有环保行业阅历优先择录。 大数据运维工程师的岗位职责 篇10 职责:1、负责服务器日常基本运维工作;2、依据服务器标准OAT上线流程,执行服务器及数据库的安装,完成OAT报告;3、负责服务器操作系统及其数据库的常规及紧急补丁更新,并供应报告;4、负责相关主机操作系统、存储、备份、虚拟化平台、数据库的性能、可用性和容量监控的日常检查;5、负责检查并确保服务器资产及其他系统登记数据的一样性及精确性;6、协作DHL服务器管理团队,完成IT项目在中国区的实施;7、其他上级经理交代的事宜。任职资格:1、 1-2年Windows、Linux服务器安装、管理及维护管理阅历;2、熟识VMw
15、are虚拟化软件,熟识HP服务器;3、熟识运用Linux操作系统及Linux操作吩咐;4、熟识SQL server,MySQL至少1种数据库系统的基本部署、监控;5、重视流程规范,熟识Windows及Linux服务器环境和平安配置;6、性格开朗、诚恳、主动、主动团队协作实力强;7、良好的英文读写实力。 大数据运维工程师的岗位职责 篇11 职责:1、与开发团队一起构建高可用,高度敏捷和高可扩展性的系统平台,参加系统架构设计;2、刚好响应并处理线上故障,快速处理运维事故,保障业务稳定运行;3、负责运维体系的建立与完善,服务器管理,应用监控、容灾、备份机制,系统调优、平安方案,系统应急处理预案的制定
16、等;4、负责系统平安和数据平安相关的技术,并帮助处理政策相关事务。任职要求:1、专科及以上学历,计算机相关专业;2、2年以上互联网行业运维阅历;3、熟识Linux环境中nginx/jenkins/elk/mongodb/mysql/redis/kafka/hadoop/spark缓存及队列服务等工具的配置维护,并驾驭工作原理;娴熟并驾驭至少一种脚本编程语言;熟识Docker,K8S 等容器技术;熟识负载均衡技术,集群技术等;4、驾驭 Zabbix/Promethus至少一种开源监控工具的运用;5、了解网络原理,熟识 TCP/IP 协议。 大数据运维工程师的岗位职责 篇12 职责:1 省中心系统
17、的运维保障工作;2 响应用户数据处理需求;3 系统版本发布,运行环境管理,确保系统稳定运行;4 应用系统、数据库故障解除;5 服务器、数据库,应用系统日常巡检;6 数据备份与数据还原;7 为系统优化供应建议。任职要求:具有较好的沟通实力和抗压实力,工作主动主动,服务意识强;熟识SQL SERVER、ORACLE数据库的维护与优化、数据备份与复原;娴熟驾驭常用SQL语句书写;娴熟运用Windows Server、CentOS等常用服务器操作系统;娴熟驾驭tomcat、nginx的部署与配置;至少熟识vmware、华为、华三虚拟化平台中一种;对于常用服务器、存储、网络设备有肯定了解。 大数据运维工
18、程师的岗位职责 篇13 职责:负责信息化系统的版本升级和性能优化;负责信息化系统客户端的安装和操作指导;负责制定信息化系统的操作手册和故障处理手册;负责信息化需求收集、分析、解决、培训;负责项目实施推广和落地;负责信息化系统的应用系统的故障处理和运维。岗位要求:具备财务基础学问,熟识财务软件者优先。例如国内的用友、金蝶,国外的sap、oracle;具备1-2年的财务系统运维阅历;良好的沟通表达实力,有良好的服务意识;工作细致、严谨;良好的职业道德及沟通、协调实力。 大数据运维工程师的岗位职责 篇14 职责:1、负责客户供应现场生产问题支持、运行环境部署和系统日常运行维护工作;2、接听用户电话、
19、解答回复用户反馈的问题;3、做好客户跟踪、回访及支持、维护工作,刚好解答处理客户运用系统过程中出现的问题;4、记录问题跟踪日志,定期总结问题报告,协作开发部门完善系统功能。任职资格:1、大专及以上学历,计算机或网络相关专业毕业。2、熟识Oracle数据库和Unix/Linux 系统,具有肯定的数据库操作实力;3、具备较强的客户沟通实力,能够耐性、快速的分析并理解客户提出的问题和需求;4、具备良好的团队合作精神、高度的责任感,对工作主动严谨;5、注意细微环节,工作细心,有良好的规范化文档书写实力。6、能够出差到客户现场进行维护工作 大数据运维工程师的岗位职责 篇15 1. 根据要求完成台式机和笔
20、记本的硬件拆卸组装、常用操作系统(MacOS、Win、Ubuntu)的安装工作;2. 完成日经常用软件(如Office、PS、钉钉)安装卸载、故障排查分析工作;3. 完成网络故障排查工作;4. 须要帮助资产同事完成资产相关工作,如资产入库出库登记、帮助总部资产同事完成资产盘点等,5. 完成会议室的日常巡检和维护工作(投影仪&电视设备的日常巡检和维护);6. 完成打印机的日常巡检和维护工作;7. 完成总部支配的不定期的出差工作;8. 完成上级布置的临时性工作; 大数据运维工程师的岗位职责 篇16 职责:1、负责银行数据中心内基础环境交付工作,包含服务器、操作系统批量安装配置管理。2、负责
21、运维自动装机系统及其他自动化运维系统,通过脚本批量配置管理服务器及系统。3、对数据中心进行周期性巡检,刚好发觉故障隐患,帮助故障处理。4、其他的一些日常运维工作。岗位要求:1、全日制本科学历,计算机、网络、通信等相关专业毕业,2年以上工作阅历。2、熟识Linux系统安装配置,熟识 shell吩咐,会编写bash脚本,对linux系统有丰富运维管理阅历,具备RHCE认证更佳。3、了解cobbler自动装机或其他自动装机原理,熟识Ansible,具备基础python编程实力,会flask api的优先考虑。3、了解X86架构服务器,有大中型企业数据中心Linux运维工作阅历者优先。4、具有良好的抗
22、压实力、沟通表达实力、人际交往实力、心情限制实力以及团队协作实力。5、有较强学习实力和学习意识,能够主动主动的学习驾驭新产品新技术。6、有较强平安生产意识,严格遵守公司及客户规章制度。 大数据运维工程师的岗位职责 篇17 职责:1、负责依据业务需求,在ERP产品上设计并实现客户需求。2、负责整个ERP项目运行,维护,包括电商的整体运行。3、完成软件系统代码实现,编写代码注释及开发文档。4、进行开发项目前期的需求定义和程序设计。5、依据设计文档或需求文档完成代码编写、调试、测试和维护工作。任职要求1、3-5年以上大型网站电商开发阅历。2、娴熟驾驭MYSQL和SQLServer数据库编程。3、娴熟
23、驾驭C#开发C/S和B/S架构系统。4、思维缜密,逻辑分析实力强。5、良好的语言表达、沟通、书写文档实力。6、软件相关专业、有财务或ERP相关阅历者优先。7、从事过用友或其他ERP软件的扩绽开发工作者优先。 大数据运维工程师的岗位职责 篇18 职责:1、负责在线系统的部署、维护和容量规划;2、负责业务服务器的配置,维护,监控,调优,故障解除等,保障运行环境的稳定运行;3、负责在线系统的上线、变更、优化等的方案制定及实施;4、推动及开发高效的自动化运维、管理工具,提升运维工作效率;5、负责服务器平安规划及实施;6、日常运维文档的撰写整理工作。岗位要求:1、有大型网站运维阅历,3-5年运维或系统管
24、理阅历;2、有娴熟的MYSQL操作及优化阅历;3、娴熟驾驭shell,python,等任一种语言;4、熟识常用服务软件(tomcat,nginx, redis,rabbitMQ等)的安装、配置、管理及优化;5、熟识Haproxy,LVS等负载均衡的配置与应用;6、娴熟zabbix,Nagios,catci等常用的监控软件;7、对docker有实操阅历者优先;8、有较好的沟通实力和团队协作精神,具有高度责任心,能够严格遵守职业操守。 大数据运维工程师的岗位职责 篇19 职责:1. 负责大数据平台的规划、部署、监控、系统优化及运维等工作,保障系统7*24小时运营;2. 为线上服务高效稳定运行负责,
25、支撑业务和数据量的快速扩张,发觉并能解决重大故障及性能瓶颈;3. 深化理解系统平台及大数据相关运维技术,持续优化集群服务架构;4. 对大数据体系下新技术的调研、应用、对内培训。职位要求:1. 至少3年以上大数据运维阅历, 深化理解Linux系统,运维体系结构;2. 深度优化HADOOP平台MR作业/计算框架/存储技术,提升集群吞吐并降低成本;3. 具有CDH(或者HDP)/HDFS/YARN/HIVE/ES/Kylin/Hbase/Kafka/Spark/Storm/Flume/Impala/Hue/Kettle/Flink等大数据系统的运维阅历,有开发阅历;4. 熟识HADOOP生态,有数据
26、平安相关工作阅历, 并能对平台CPU/MEM/IO/网络/调度中一个或多个方面的性能调优;5. 娴熟驾驭shell/python中的随意一门脚本语言;6. 剧烈责任感、缜密的逻辑思维实力,良好的团队协作实力,具备良好的项目管理及执行实力; 大数据运维工程师的岗位职责 篇20 职责:1、负责公司平台云服务器的日常运维工作;2、负责公司运营业务平台的环境部署及维护,确保平台稳定的运行;3、负责数据中心建设、运维和日常值班工作;4、处理网络突发事务,解决网络故障,保障线上业务7*24稳定运行;5、具备性能分析及运维阅历,能够针对Linux服务器、MySQL数据库服务器,找到性能瓶颈及缺陷,提出优化方案;解决维护工作中的技术疑难,提出针对性的解决方案;6、编写各类维护文档,譬如:实施方案、实施报告、巡检报告、故障处理报告等。任职要求:1、大专及以上学历,计算机相关专业,有至少2年以上网站运维阅历;2、熟识Unix/Linux和Windows操作系统的基本吩咐、常规服务、文件结构;3、熟识桌面维护及网络平安学问,可娴熟进行局域网的搭建和网络设备的基本维护和故障处理;4、熟识腾讯云/阿里云云服务器,有大数据、高并发数据库开发维护阅历优先;5、具备良好的沟通实力和团队合作精神,高度的责任心,有较强的沟通实力。