搜索引擎数据处理工程师

1. 01

   负责搜索场景下多源数据的采集、清洗、转换与治理，建设稳定高效的数据处理流程，保障数据链路的完整性、准确性与时效性；

2. 02

   参与搜索训练数据、评测数据和业务样本的构建与管理，包括Query、文档、点击行为、人工标注等数据的加工、对齐、去噪与质检；

3. 03

   支持搜索召回、排序、Query理解等算法方向的数据生产与分析需求，协同算法和开发团队完成特征样本构建、离线评测及效果分析；

4. 04

   建设并优化数据质量监控、异常排查和评估机制，持续提升搜索数据资产的可用性、规范性和复用效率。

1. 01

   具备扎实的数据处理基础，熟悉常见数据清洗、ETL、统计分析方法，能够独立完成复杂数据链路的设计与实现；

2. 02

   熟悉Python、SQL等数据处理工具，熟悉Linux工作环境，有Spark、Hive、Flink、Elasticsearch等相关技术使用经验者优先；

3. 03

   理解搜索业务中的基本数据形态和处理流程，对Query、文档、行为日志、标注数据、评测数据等有较好的理解；

4. 04

   具备良好的问题分析与沟通协作能力，能够从海量数据中发现异常、定位原因，并提出可落地的优化方案。

5. 05

   硕士学历且有4年以上工作经验，博士无工作经验要求。

加分项

1. 01

   有搜索、推荐、广告等场景的数据工程、数据治理、数据标注或评测分析经验者优先；

2. 02

   熟悉自动化质检、样本挖掘、多模态数据处理或大模型训练数据构建者优先。