奕派科技
大数据开发工程师(数仓方向)-神龙汽车
岗位职责
负责数据仓库的架构设计、数据模型设计(维度建模)、ETL开发与测试,完成数仓标准分层建设(ODS→DWD→DWS→ADS),支撑业务分析、报表与数据应用需求。
负责Hive、Oracle、MySQL、ClickHouse等环境下复杂SQL开发、查询性能优化,处理数据倾斜、执行效率、大表关联等常见问题。
熟练使用PL/SQL编写存储过程、脚本、索引等,使用Shell脚本封装SQL逻辑,实现任务自动化、参数化运行与调度。
负责异构数据源的数据同步、迁移、清洗、整合,使用ETL工具完成离线/准实时数据接入与数据处理。
基于FineReport、帆软BI等工具开发报表与可视化看板,支撑业务数据提取、固定报表、自助分析与数据核对。
负责数据质量规则建设与监控,保障数据一致性、完整性、准确性与及时性,定位并解决数据异常、任务延迟、运行报错等问题。
在银河数据中台环境进行日常开发、任务运维,使用DolphinScheduler/Airflow等调度工具管理任务依赖、调度配置与告警。
与产品、业务、分析师协同,理解需求并输出数仓方案;编写数据字典、模型文档、ETL设计文档等技术资产。
任职要求
知识经验
文化程度:大学本科
外语要求:四级
工作经历:3年及以上大数据开发或数据仓库相关工作经验,有汽车行业数据项目经验者优先
职业资格:①数据库与SQL能力:熟练掌握Oracle、MySQL、Hive,了解ClickHouse使用;具备复杂SQL编写与优化能力,能分析执行计划、处理数据倾斜、分区/分桶优化等。 ②脚本与自动化能力:熟悉PL/SQL开发,能独立编写存储过程、数据处理脚本;熟练使用Shell实现脚本封装、任务调度与异常处理。 ③数仓与生态能力:熟悉数仓分层架构、维度建模理论(星型/雪花模型、缓慢变化维等);熟悉Hadoop生态,了解HDFS、YARN基本原理。 ④平台与工具能力:熟悉银河数据中台基本操作与组件使用;掌握至少一种ETL工具(DataX、Kettle、Sqoop、Spark SQL等),会使用FineReport、帆软BI等至少一种报表工具。 ⑤数据治理与质量能力:了解数据治理、数据血缘、元数据管理;能设计并落地数据质量校验规则,保障数据一致性、完整性、及时性。 素质要求:
跨部门沟通能力:具备高效沟通与协作能力,能对接产品、业务、分析师等多方需求,推动数据方案落地。
创新与学习能力:持续关注大数据技术发展,快速迭代数据处理方案,解决业务中的复杂数据问题。 年龄要求:40岁以内
信息来自企业官方招聘渠道
OfferSeek 对公开岗位信息进行聚合、去重和结构化整理,最终申请以企业官方页面为准。