岗位描述
1. 负责数据闭环工具平台(数据挖掘、真值/标注生产、Clip 管理、训练集构建等)的 AI Agent产品迭代与形态设计,重点打磨跨模块长链任务的意图识别、多轮对话、任务完成率等核心指标 2. 设计 Agent 交互范式与能力边界:自动执行 vs 用户确认的分级策略(读操作可自动、写操作入库需确认)、失败降级策略、人在环(HITL)协作机制 3. 搭建评测体系(准确率、任务完成率、轨迹级回归用例库、LLM-judge 人工校准),基于 Bad Case 归因(幻觉、意图歧义、工具调用失败)推动 Prompt/Skill 迭代 4. 分析用户查询日志与反馈,把高频需求(badcase 挖掘、数据检索、派标质检等)和 badcase 沉淀为产品需求与领域知识