职位描述: 1、负责公司大数据中台体系规划、架构的设计,推进数据资产化,资产服务化、数据治理等落地实施
2、负责大数据平台的关键技术的预研和选型,把控平台的发展方向。
3、负责Hadoop/Spak/Yan/Hive/Kafka/Hbase/Kebeos/Flink/Mysql等集群的设计、搭建和维护,负责离线数仓和实时数仓的设计并落地。
4、负责搭建任务调度体系、元数据管理、数据治理、数据资产管理、数据安全、数据质量监控、决策引擎等系统建设。
5、通过新方法新技术提升数据研发团队的效率,保证需求高效落地,助力业务高速发展。
6、带领团队完成集群优化相关的组件开发工作,指导和培训工程师,不断提升团队能力。
任职资格:
1、熟悉hadoop生态,熟练掌握Hadoop生态组件等数据处理技术,对大数据基础架构和平台有一定的理解和实践。
2、Java基础扎实,有大型业务系统的架构设计和实施能力,熟悉分布式系统的设计和应用。
3、对主流技术有深入的理解和丰富的使用经验,有源码优化经验、平台建设经验优先。
4、掌握数仓、数据治理、数据资产管理等相关知识,包括不局限于:任务调度、元数据管理、数据资产管理、性能调优等。
5、较强的人际关系能力,有团队精神、较强的执行与推动能力,有一定抗压力。
6、有不断的学习新知识的能力,掌握大数据技术发展趋势。
7、本科及以上,计算机或数据领域相关专业,5年以上大数据架构经验。