千问事业部
千问事业部-大模型产品评测策略专家-北京/杭州
RESPONSIBILITIES
岗位职责
制定所负责业务线的评测策略,与产品、算法目标对齐,明确评测优先级与节奏;
设计并维护评测标准与Rubrics体系,建立科学、可量化的评估框架;
产出深度评测报告与Bad Case归因分析,输出可落地的改进建议,驱动产品迭代;
开展评测数据洞察与Insight分析,从评测结论中提炼业务价值与趋势判断;
组织行业专家参与评测,把控人评质量,推动专家逆序率持续下降
REQUIREMENTS
任职要求
本科及以上学历,专业不限,计算机语言学、人工智能优先;
1年以上大模型评测或NLP质量评估经验,有垂域评测经验优先;
具备评测集设计、标注规范制定与质控的完整经验;
较强的数据分析与报告撰写能力,能将评测结论转化为业务语言;
具备行业专家资源组织经验,能独立开展主观评测活动;
良好的跨团队协作能力,能与产品、算法团队高效沟通并建立信任
信息来自企业官方招聘渠道
OfferSeek 对公开岗位信息进行聚合、去重和结构化整理,最终申请以企业官方页面为准。