岗位职责：1、负责大数据集群运维管理，以及数据总线、流计算平台、离线计算平台、分布式数据库的开发运维管理等工作，保障集群稳健运行。2、负责集群容量规划，架构审核，能解决高难度的故障隐患、疑难杂症。在性能优化时，负责攻克大数据量，高并发，高稳定性，易用性等各种技术难点。3、研究与跟踪大数据基础新技术发展方向，并能在团队内进行推广应用。素质要求：1、本科及以上学历，计算机、数学相关专业，5年以上软件行业从业经验。2、精通java开发技术，对JVM性能调优有较深刻的理解，具备丰富的java程序故障分析经验。3、精通Hadoop生态圈，掌握数据存储Hadoop、HBase、HDFS，数据收集Kafka、Flume、Canal、LogStash，分析计算Spark、Hive、presto，实时计算Flink、Storm，数据索引ES等大数据基础软件的环境搭建技术，能解决环境搭建过程中的问题。4、具备生产环境快速trouble-shooting能力，能解决大数据基础环境中出现的疑难杂症，能进行基础环境的参数调优，具备阅读源码解决环境问题能力者优先，开源项目commiter或贡献过patch者更佳。 职能类别：系统架构设计师 关键字：javaHadoop