中国绿发
大数据开发
RESPONSIBILITIES
岗位职责
负责大数据平台的设计、开发与维护,构建和优化数据处理管道,参与大数据技术选型与架构设计,保障处理效率与稳定性。
设计实现多源数据采集方案(日志、数据库、API等),开发数据清洗、转换和加载(ETL)流程,确保数据实时性、准确性与完整性。
基于Spark、Flink等框架开发批处理和流处理任务,实现复杂数据计算逻辑与业务指标计算,优化分布式系统性能。
设计维护数据仓库、数据湖等存储体系,优化存储结构与访问性能,开发数据API和服务接口,支撑业务部门查询分析需求。
监控平台运行状态,建立完善的监控告警机制,编写技术文档与操作手册,制定开发规范,参与技术分享与团队知识积累。
REQUIREMENTS
任职要求
精通Hadoop、Spark、Flink等大数据技术框架,熟练掌握Java/Scala/Python等编程语言及SQL和NoSQL数据库。
熟悉数据仓库原理,具备分布式系统设计和性能优化经验,熟悉Linux环境及Shell脚本编程。
具备较强逻辑思维与团队协作能力,能适应阶段性攻坚任务。
持有大数据相关认证(如Cloudera、Hadoop等)或云厂商大数据证书者优先。 学历:硕士研究生 专业:数据科学与大数据技术、计算机科学与技术、软件工程
信息来自企业官方招聘渠道
OfferSeek 对公开岗位信息进行聚合、去重和结构化整理,最终申请以企业官方页面为准。