深圳虾皮信息科技有限公司
【S&R&A】高级后端工程师/专家-离线方向
岗位职责
负责搜索、推荐、广告离线后端服务的设计、开发和持续演进,覆盖样本系统、数据配送、离线资源调度等核心能力。
负责样本系统建设与维护,支撑搜索、推荐、广告全场景的训练与评估样本生产;面向生成式长序列等新型样本需求,建设用户序列独立存储、序列合并、加工、质量保障和交付能力。
参与数据配送平台的设计、开发与持续优化,保障样本、索引及其他离线数据及时、准确、稳定、可追溯地交付至下游业务和在线系统。
负责离线计算与资源调度能力建设,包括 Flink / Spark on Kubernetes 平台、资源调度与隔离、弹性扩缩容、运行监控和稳定性保障;持续优化大规模数据处理任务的执行效率与资源利用率。
与算法及其他工程团队紧密协作,参与系统架构设计、技术方案评审、代码开发、测试验证、发布升级及线上问题排查,将业务需求沉淀为可复用、可演进的平台能力
任职要求
【必须】计算机相关专业本科及以上,3 年及以上后端、数据平台或分布式系统相关经验;
【必须】具备扎实的后端工程能力,熟悉至少一种 Go、Java、C++ 或 Python 等编程语言,具备良好的数据结构、算法、操作系统、计算机网络和数据库基础。
【必须】具备分布式后端服务或数据平台开发经验,能够独立完成服务设计、开发、测试、发布和运维;理解高可用、可扩展、可观测和性能优化等工程实践。
【必须】具备良好的系统设计、问题分析和解决能力;具备责任心、协作意识,能够与算法及其他工程团队高效配合并持续推进问题解决。
【加分项】 熟悉离线数据处理与大数据生态,具备 Hadoop、YARN、Spark、Flink、Hive、Kafka 等一种或多种技术的实际开发经验。
【加分项】理解离线数据链路中的数据质量、任务依赖、幂等重跑、回补、Schema 演进和数据追溯等问题;有样本系统、用户行为序列、长序列数据处理、数据配送、索引构建或工作流编排经验者优先。
【加分项】有 Kubernetes、容器化平台、资源调度或大规模作业管理经验者优先;熟悉 Flink / Spark on Kubernetes 等离线计算平台者优先
信息来自企业官方招聘渠道
OfferSeek 对公开岗位信息进行聚合、去重和结构化整理,最终申请以企业官方页面为准。
