1、负责公司大数据框架的规范,部署,监控,维护; 2、负责大数据自动化运维管理平台的设计和实施; 3、负责新的大数据框架和分布式技术的测试研究; 4、负责优化集群架构,提前发现并提出解决性能瓶颈的方案。
1、计算机相关专业,3年以上linux系统运维工作经验其中1年以上大数据运维经验; 2、熟悉linux操作系统,熟练使用python,有大数据开发经验优先; 3、具有elasticsearch/solr/kafka/hadoop/hbase/spark/storm/hdfs/Yarn等分布式系统运维经验; 4、熟悉分布式日志分析系统ELK及相关技术。