职位描述: 1.负责大数据平台架构的设计和性能调优,支持海量数据的离线和实时分析,对数据敏感
2.参与大数据平台的搭建与维护,保证数据平台的稳定和可靠
3.负责大数据运维监控与统一运维管理平台的集成
4.负责集群容量规划、架构审核、合理进行资源分配、发现并解决故障隐患以及性能优化等问题
5.负责技术选型过程中,相关组件的功能性能测试
6.持续探索大数据生态圈相关组件和应用案例,为集群的持续优化提供建设性建议
任职要求:
1.本科学历以上,计算机相关专业优先,3年及以上大数据运维相关领域经验
2.有大数据处理分析经验,熟悉Spak、Hive、Flink等大数据处理平台
3.熟悉hadoop生态圈各组件的原理以及应用,包括但不限于:hdfs、yan、kafka、hive、flink、hbase、edis、es
3.具备扎实的编程功底,精通至少一门编程语言如(如:python,shell,java),熟悉大数据平台组件部署思路
4.熟悉centOS等Linux操作系统,熟悉操作系统监控优化的一些基本方法,对操作系统原理及网络有一定了解
5.熟悉CDH生态组件的部署与touble shooting,有过实际生产运维经验者优先