职责：

1、负责公司Hadoop/Hive/Spark/HBase/Druid/es/实时计算等开源平台的运维保障、容量规划、运行优化等工作；

2、负责公司整个大数据平台的日常运维工作，跟进并处理系统事件，持续优化平台体验；

3、梳理优化业务使用集群的流程及规范，使平台在资源利用、质量效益等方面均达到较高水平；

4、丰富的故障排错检验,及时处理公司大数据平台各类异常和故障；

5、日常跟踪业界技术发展动态，并结合业务发展需要，研究引入合适的技术。

要求：

1、3年以上分布式存储与大规模集群实战运维经验；

2、深入理解linux系统、运维体系结构，精于容量规划、架构设计、性能优化，能够独立解决操作系统层面的各类疑难问题；

3、熟悉JAVA,理解JAVA虚拟机工作原理；

4、熟悉hadoop、hive、hbase、yarn、spark、storm elasticsearch kafka等分布式计算系统及消息队列系统开发等组件的原理及运维方式；

5、有开发经验优先，精通一门以上脚本语言(JAVA/python等)；

6、熟悉大数据生态圈的各类产品的部署和使用;

7、熟悉大数据平台的监控以及调优，具备很强的故障排查能力，有很好的技术敏感度和风险识别能力