腾讯音乐娱乐集团
酷狗大数据开发工程师
岗位职责
大数据开发:开展大数据离线、实时数据处理开发工作,涵盖数据采集、清洗、建模、计算等业务场景,完成代码编写、调试与性能优化,保障数据任务高效稳定运行。
大数据平台建设:重点参与大数据集群全链路日常建设、监控告警、故障排查与调优,协助完成集群部署、扩容、版本升级、资源调度等工作,保障平台7×24小时稳定运行。
PB级数据处理优化:重点参与PB级海量数据整合、计算与存储优化工作,协同解决数据倾斜、任务超时、资源浪费等海量数据场景核心问题,助力提升集群整体数据处理效率与资源利用率。
AI Agent场景落地:结合大数据业务需求,重点参与AI智能体的搭建、调试与流程编排,协助落地智能故障排查、数据异常分析、任务自动化调度等功能,推动大数据平台智能化升级。
架构迭代与业务支撑:重点参与大数据全链路架构优化升级,梳理数据流程、协助沉淀标准化技术规范;对接业务需求,配合输出技术解决方案,参与攻坚复杂场景下的技术难点,支撑业务数据赋能。
任职要求
3年以上大数据相关工作经验,深度参与过PB级海量数据处理、大型大数据集群建设项目,有中大型企业平台搭建优化经验者优先。
大数据全栈技术:精通大数据完整技术链路,熟练运用Hadoop、Hive、Spark、Flink、Kafka、HBase、Starrocks等主流组件,精通数据采集、存储、计算、调度、监控全流程原理与实操。
大数据建设能力:具备扎实的大数据集群建设能力,可独立排查处理集群宕机、任务异常、性能瓶颈等各类线上问题,熟练配合完成集群扩容、权限管理、资源优化等相关工作。
AI Agent应用能力:熟悉AI Agent智能体搭建与场景落地流程,可配合团队完成大数据场景下的智能化改造、自动化运维、智能数据分析等功能落地,有AI+大数据融合项目经验者优先。
综合技能与素养:熟练掌握SQL、数据建模与数据治理知识,熟悉Linux系统及Shell脚本编写;具备较强的逻辑思维、问题排查与技术攻坚能力。
基础要求:本科及以上学历,计算机、大数据、人工智能等相关专业优先,工作严谨负责,具备良好的抗压能力与团队协作意识。 有以下任意经验优先
有PB级集群优化、海量数据治理、实时数仓搭建项目实战经历;
参与过AI智能运维、大模型+大数据落地相关项目;
熟悉大数据云原生架构、平台自动化建设体系;
参与过大数据项目方案设计、落地交付、迭代优化全流程。
信息来自企业官方招聘渠道
OfferSeek 对公开岗位信息进行聚合、去重和结构化整理,最终申请以企业官方页面为准。