AI评估运营专家（交易方向） - AI数据与安全

岗位职责

团队介绍：AI 数据与安全团队为 Seed 基座模型及 AI 原生应用提供跨模态数据服务，覆盖数据生产全流程，包含模型评估标准的制定、数据规模化生产、数据飞轮搭建，不断提升数据质量，支持模型快速迭代。 团队由产品经理、数据工程、数据运营等跨职能人才组成，并通过与 Seed 研究员、行业专家、全球顶尖数据供应商紧密合作，从真实场景中收集反馈并分析模型表现数据，解决 AI 前沿突破过程中的复杂数据问题，推动模型性能与用户体验的双重提升。我们既是帮助模型技术迭代的一线贡献者，也是模型和 AI 产品的一手用户。 1、深入理解交易业务与大模型应用场景，围绕用户、商家和平台需求，搭建覆盖模型能力、业务效果、安全合规及用户体验的评测体系； 2、设计评测方案与评价标准，包括评测集构建、指标定义、评分规则、任务流程及质量验收机制，确保评测结果科学、稳定、可复现； 3、负责评测项目的全流程运营，协同产品研发，推进需求拆解、数据生产、质量控制、结果交付与复盘改进； 4、搭建自动评测体系，通过Rubrics合成、Judger调优、分维度评估、评测工具优化等方法，提升评测的效率和质量； 5、针对用户意图、商品理解、搜索推荐、智能交互等交易场景，识别模型效果短板与典型问题，形成可执行的优化建议。

任职要求

1、本科及以上学历，计算机、人工智能、统计学、电子商务、经济学、管理学等相关专业优先； 2、具备大模型评测、数据运营、产品运营或交易业务相关经验，对大模型训练、评测和应用链路有较完整的理解； 3、熟悉电商、生活服务、内容交易或其他平台型交易业务，对商品、用户、商家、营销及履约链路具备较强的业务洞察； 4、掌握Python、SQL等编程语言，熟练使用Vibe coding，有提示词调试、Skill优化、工具搭建等经验； 5、具备优秀的数据分析与问题归因能力，能够从复杂评测结果中识别关键问题并提出改进方案，具备较强的项目管理和跨团队协作能力，能够推动算法、产品团队共同达成目标； 6、逻辑清晰，学习能力强，对内容质量和细节敏感，能够制定明确、可执行的评价标准。

岗位点评0

• 还没有点评，来当第一只嗅狗吧