职位描述
岗位主要工作内容:
1、能搭建和维护Hadoop集群,解决海量数据不断增长面临的挑战,保证服务器的稳定运行。
2、负责深入研究hadoop集群运维相关技术,持续优化服务架构,基于分布式系统集群权限管理、故障分析。
3、熟悉Hadoop/hive/hbase/zookeeper/kafka/impala/kudu/spark等组件原理。
4、掌握cdh集群管理、Linux、Oracle/MySQL、Java web等技术的运用。
5、负责构建可支撑大规模分布式集群的运维平台、监控报警系统、集群自动部署系统等。
6、负责MySQL和Oracle日常数据库管理维护,监控,及时定位和排除数据库故障,并进行持续性能优化。
专业知识/技能要求:
1、计算机或相关专业,全日制本科学历。
2、具有大型应用平台运维经验,有过运维自动化项目经验者优先。
3、熟悉Hadoop以及Hadoop生态圈上的各种应用的几种,如HBase、HDFS、Solr、ZooKeeper、Yarn等,能解决Hadoop的复杂问题并具备管理,配置,运维经验。
4、熟悉Python、shell语言,并且能够熟练使用Python、Shell进行脚本编写。
5、熟悉MySQL和Oracle等主流数据库,或关系型数据库Greenplum。
6、具有很高的分析、解决问题的能力和应变能力,良好的沟通能力。
7、对Linux/Unix系统有深入的理解,有过具体的系统优化经验。
以往的工作经历要求:
三年以上相关运维工作经验