职责描述： 1、负责大数据平台的软件日常运维工作，包括部署、配置、升级、管理、优化、监控报警，保障平台服务7*24稳定可靠高效运行； 2、负责分析大数据平台各个组件运行状态，负责大数据平台运行故障的分析、定位和解决，并根据业务场景进行定制优化； 3、负责与外部厂商基于大数据平台进行对接联调，保证其运行在平台上的业务模型及各类程序正常适配； 4、负责业务集群日常问题的解答、汇总整理，定期反馈到研发，并跟踪解决进度等； 5、参与大数据集群自动化运维工具的设计与研发； 6、参与新技术、新组件的技术探索、测试和应用。 任职要求： 1、熟悉Linux(redhat/centos)软硬件环境、系统管理和优化，熟练部署、优化各种常用服务，熟练使用Linux 命令； 2、具备一定的故障排查能力，能够独立排查及解决操作系统层的各类问题，有良好的技术敏感度和风险识别能力； 3、熟悉Hadoop大数据生态圈，包括但不限于Zookeeper、HDFS、YARN、Hive、Hbase、Spark、Kafka、Flume、ES、MySQL、Elasticsearch等； 4、熟悉Hadoop各组件的原理和实现，有实际部署维护、管理( 包括元数据管理)及优化经验，并拥有持续调优能力，运维管理过大规模数据平台经验者优先考虑，有大型CDH集群维护经验优先； 5、熟悉掌握常用的安全协议和组件服务，对hadoop各组件的权限、安全、ranger进行配置管理。熟悉SSL、ACL、ranger等在大数据环境场景的使用； 6、熟悉grafana、prometheus等主流开源监控软件，有较强的python编程能力。 7、具备良好的服务意识，善于主动思考，自我驱动力强。有良好的沟通、协调能力，富有团队精神，有较强的文档编写能力。