高级大数据平台开发工程师

负责为云上和自有数据中心K8s集群，分布式存储集群，以及其上运行的大数据/深度学习平台，定制、设计和开发各种系统模块，包括但不限于定制和开发大数据和深度学习平台的监控系统，任务追踪和性能分析系统，K8s集群各种底层插件，平台服务的CI/CD系统等。 工作上需要深入细致，对大数据和深度学习技术和平台有浓厚兴趣, 具备较强的团队管理能力和沟通能力，思维活跃，前瞻学习能力强。 职责：

1. 01

   负责定制和开发云上以及自有数据中心上的监控报警系统、任务追踪和性能分析系统、平台服务的CI/CD系统等。

2. 02

   负责定制和开发K8s集群各种底层插件，包括CNI，GPU，RDMA等。

3. 03

   负责大数据和深度学习的平台各种基础系统模块的开发

1. 01

   5年以上大数据系统开发，设计，架构经验。有大数据或深度学习任务开发的经验为佳。

2. 02

   3年以上AWS或阿里云上大数据平台基础架构开发经验。

3. 03

   熟悉大数据相关技术：Hadoop, Kafka, Hive, Zookeeper, Spark, Cassandra, MapReduce, 并阅读过相关源码。

4. 04

   熟练理解和掌握Unix或linux系统。

5. 05

   具备大数据云平台、计算存储平台、可视化开发平台经验，具备中大型成功项目经验优先；具备大规模分布式计算平台的使用和并行算法的开发经验