数据保存说明
线上 Demo 使用临时文件存储;平台重启或实例回收后任务可能丢失,请勿上传敏感或生产数据。
演示数据
这是可重复生成的示例任务
内容来自仓库 acceptance fixture,用于展示完整工作流;不代表真实用户、线上流量或生产分析结果。实例重启后可从首页演示入口重新生成。
基线反馈
30
v2.3 · 48h
当前反馈
30
v2.4 · 48h
问题簇
6
相似反馈聚合后的问题单元
待人工复核
5
高风险、低置信度或判断冲突
后续反馈
30
v2.4 · 后续 48h
Window trend
观察窗口趋势
当前相对基线与后续相对当前分别计算;后一轮不会覆盖前一轮的数量、状态或原始证据。
基线 → 当前
30 条 → 30 条
6 个问题簇,来自独立的 基线 与 当前 快照。
当前 → 后续
30 条 → 30 条
6 个问题簇,来自独立的 当前 与 后续 快照。
Issue clusters
问题簇与原始证据
风险是问题簇级判断。每张卡片应能回到组成它的基线和当前反馈,而不是把一条反馈直接当成一个问题。
新增
加重
稳定
缓解
证据不足
基线
0 条
0.0%
→
当前
4 条
13.3%
占比变化
+13.3 个百分点
风险依据
- 基线 0/30 条(0.0%),当前 4/30 条(13.3%)
- 按当前导入数据,该问题从基线到当前呈“新增”状态
- 当前窗口包含规则识别的 P1 反馈
- 聚合或分类置信度不足,需要人工复核
- 分类
- 模型能力问题
- 置信度
- 0.69
- 负责人
- 待分配
- 处理状态
- 待处理
- 下步动作
- 先核对原始反馈与聚合边界
- 后续验证
- 等待下一观察窗口
查看原始反馈证据
4 条成员反馈
原文:“模型回答的上下文只展示到一半后续内容被截断”
原文:“长模型回答的上下文被截断只剩开头”
原文:“模型输出的上下文到中途就断了后面没有显示”
原文:“模型回答太长时上下文后半段会被截掉”
人工复核与处理
基线
1 条
3.3%
→
当前
6 条
20.0%
占比变化
+16.7 个百分点
风险依据
- 基线 1/30 条(3.3%),当前 6/30 条(20.0%)
- 按当前导入数据,该问题从基线到当前呈“加重”状态
- 当前窗口包含规则识别的 P1 反馈
- 聚合或分类置信度不足,需要人工复核
- 分类
- 交互体验问题
- 置信度
- 0.63
- 负责人
- 导出体验团队(演示)
- 处理状态
- 处理中
- 下步动作
- 复核导出任务队列,并在下个 48h 窗口继续验证
- 后续验证
- 等待下一观察窗口
查看原始反馈证据
7 条成员反馈
原文:“点击导出按钮后完全没有生成文件”
原文:“导出按钮点下去一直卡在99%不动”
需复核:分类低置信度;同时命中多个问题类型
原文:“导出入口点击后没有任何反应”
原文:“导出按钮点击后文件迟迟不出现”
原文:“导出按钮提示失败让我重试”
需复核:分类低置信度;同时命中多个问题类型
原文:“按下导出按钮后一直转圈文件没出来”
需复核:分类低置信度;同时命中多个问题类型
原文:“点击导出按钮后没有生成文件”
人工复核与处理
基线
4 条
13.3%
→
当前
4 条
13.3%
占比变化
0.0 个百分点
风险依据
- 基线 4/30 条(13.3%),当前 4/30 条(13.3%)
- 当前窗口包含规则识别的 P1 反馈
- 分类
- 账号、隐私与数据问题
- 置信度
- 0.72
- 负责人
- 待分配
- 处理状态
- 待处理
- 下步动作
- 先核对原始反馈与聚合边界
- 后续验证
- 等待下一观察窗口
查看原始反馈证据
8 条成员反馈
原文:“账号登录失败验证码还是收不到”
需复核:同时命中多个问题类型
原文:“重新登录仍然无法进入工作区”
原文:“登录入口又提示账号验证失败”
需复核:同时命中多个问题类型
原文:“账号登录不上移动端应用”
原文:“账号登录失败验证码一直收不到”
需复核:同时命中多个问题类型
原文:“重新登录时始终进不去工作区”
原文:“登录入口提示账号验证失败”
需复核:同时命中多个问题类型
原文:“账号无法登录移动端”
人工复核与处理
基线
2 条
6.7%
→
当前
2 条
6.7%
占比变化
0.0 个百分点
风险依据
- 基线 2/30 条(6.7%),当前 2/30 条(6.7%)
- 当前窗口包含规则识别的 P1 反馈
- 聚合或分类置信度不足,需要人工复核
- 分类
- 交互体验问题
- 置信度
- 0.69
- 负责人
- 待分配
- 处理状态
- 待处理
- 下步动作
- 先核对原始反馈与聚合边界
- 后续验证
- 等待下一观察窗口
查看原始反馈证据
4 条成员反馈
原文:“导出按钮显示成功但下载文件的列顺序完全乱了”
原文:“导出按钮完成后表格格式错乱文字挤在一起”
原文:“导出按钮显示成功但下载文件的列顺序完全乱了”
原文:“导出按钮完成后表格格式错乱文字挤在一起”
人工复核与处理
基线
7 条
23.3%
→
当前
2 条
6.7%
占比变化
-16.7 个百分点
风险依据
- 基线 7/30 条(23.3%),当前 2/30 条(6.7%)
- 按当前导入数据,该问题从基线到当前呈“缓解”状态
- 当前窗口包含规则识别的 P1 反馈
- 聚合或分类置信度不足,需要人工复核
- 分类
- 模型能力问题
- 置信度
- 0.67
- 负责人
- 待分配
- 处理状态
- 待处理
- 下步动作
- 先核对原始反馈与聚合边界
- 后续验证
- 等待下一观察窗口
查看原始反馈证据
9 条成员反馈
原文:“回答引用了错误的文档内容不准确”
原文:“引用段落与答案对不上回答错了”
原文:“回答引用了不存在的条目内容不准确”
原文:“引用的文档段落对不上回答错了”
原文:“答案里的来源链接和引用内容不一致回答不准”
需复核:分类低置信度
原文:“引用资料被张冠李戴答错了”
原文:“回答把文档引用编错了”
原文:“引用页码对不上给出的结论错了”
原文:“来源引用不准确给出的结论错误”
人工复核与处理
基线
0 条
0.0%
→
当前
2 条
6.7%
占比变化
+6.7 个百分点
风险依据
- 基线 0/30 条(0.0%),当前 2/30 条(6.7%)
- 反馈过于模糊,系统不自动输出新增、加重、稳定或缓解结论
- 聚合或分类置信度不足,需要人工复核
证据缺口
- 问题描述较模糊,仅形成低置信度候选簇,需人工复核后再判定趋势
- 分类
- 不明确/其他
- 置信度
- 0.37
- 负责人
- 待分配
- 处理状态
- 待处理
- 下步动作
- 先核对原始反馈与聚合边界
- 后续验证
- 等待下一观察窗口
查看原始反馈证据
2 条成员反馈
原文:“最近更新后感觉越来越不好用”
原文:“整体变得不太好用但说不清具体哪里”
需复核:分类低置信度
人工复核与处理
Follow-up comparison
后续相对当前
这里单独展示当前 → 后续的数量、状态和原始证据;前一轮“当前相对基线”仍保留在上方。
第二轮
当前 13.3% · 后续 20.0% · 登录失败:后续 6 条,当前 4 条;变化状态为加重。
F007
原文:账号登录失败的情况比之前更多了
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F008
原文:今天重新登录多次都进不去
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F009
原文:登录入口连续提示账号验证失败
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F010
原文:账号无法登录工作区的问题又出现了
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F011
原文:移动端账号登录不上并且验证码失效
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F012
原文:登录失败后一直回到登录页
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
C011
原文:账号登录失败验证码还是收不到
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C012
原文:重新登录仍然无法进入工作区
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C013
原文:登录入口又提示账号验证失败
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C014
原文:账号登录不上移动端应用
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
当前 13.3% · 后续 13.3% · 回答被截断:后续 4 条,当前 4 条;变化状态为稳定。
F003
原文:模型回答的上下文依旧只显示到一半被截断
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F004
原文:长回答的上下文后半段还是没有展示
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F005
原文:回答输出的上下文仍会在中途断掉
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F006
原文:模型答案太长时上下文尾部继续被截掉
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
C007
原文:模型回答的上下文只展示到一半后续内容被截断
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C008
原文:长模型回答的上下文被截断只剩开头
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C009
原文:模型输出的上下文到中途就断了后面没有显示
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C010
原文:模型回答太长时上下文后半段会被截掉
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
当前 6.7% · 后续 6.7% · 导出成功但格式错乱:后续 2 条,当前 2 条;变化状态为稳定。
F017
原文:导出按钮显示成功但下载表格列顺序还是混乱
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F018
原文:导出完成后的文件格式仍然错乱
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
C019
原文:导出按钮显示成功但下载文件的列顺序完全乱了
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C020
原文:导出按钮完成后表格格式错乱文字挤在一起
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
当前 20.0% · 后续 6.7% · 导出文件失败:后续 2 条,当前 6 条;变化状态为缓解。
F001
原文:导出按钮偶尔仍然没有生成文件
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F002
原文:导出按钮卡住后最终没有拿到下载文件
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
C001
原文:点击导出按钮后完全没有生成文件
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C002
原文:导出按钮点下去一直卡在99%不动
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C003
原文:导出入口点击后没有任何反应
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C004
原文:导出按钮点击后文件迟迟不出现
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C005
原文:导出按钮提示失败让我重试
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C006
原文:按下导出按钮后一直转圈文件没出来
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
当前 6.7% · 后续 3.3% · 引用内容错误:后续 1 条,当前 2 条;变化状态为缓解。
F013
原文:引用的来源段落仍然对不上答案内容不准确
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
C015
原文:回答引用了错误的文档内容不准确
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C016
原文:引用段落与答案对不上回答错了
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
待复核/趋势暂不判定
模糊体验反馈(待复核)
2 → 2
当前 6.7% · 后续 6.7% · 模糊体验反馈(待复核):后续 2 条,当前 2 条;变化状态为待复核/趋势暂不判定。
F015
原文:最近用起来还是不太好用但难以描述
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
F016
原文:整体感觉变得不好用具体问题说不上来
来源:App Store · 产品版本:v2.4
窗口起止(后续窗口):2026-07-05T00:00:00+08:00 → 2026-07-07T00:00:00+08:00
C017
原文:最近更新后感觉越来越不好用
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
C018
原文:整体变得不太好用但说不清具体哪里
来源:App Store · 产品版本:v2.4
窗口起止(当前窗口):2026-07-03T00:00:00+08:00 → 2026-07-05T00:00:00+08:00
Owner summary
负责人摘要
只汇总有证据且经过人工确认的重点问题;待复核内容不会伪装成已确认结论。
【演示数据】Acme Copilot v2.4 发版观察 · 48h 负责人摘要
说明:以下只汇总有原始证据、已人工确认且已分配负责人的问题;发版后变化不代表版本因果。
- [P1/加重] 导出文件失败
负责人:导出体验团队(演示);状态:处理中
动作:复核导出任务队列,并在下个 48h 窗口继续验证
证据:基线 1 条,当前 6 条
结果:后续窗口仍有相关反馈,保留观察并继续跟进
Run & audit trail
运行与人工留痕
输入校验、fallback、异常、系统判断和人工修改按时间追加,不另造孤立审计页。
-
确认问题簇
演示复核:已核对基线、当前与后续窗口的原文证据。
操作者:demo_seed
-
导入反馈
后续窗口 48h 已导入 30 条新反馈;跳过 0 条,文件内重复 0 条。
操作者:system
-
导入反馈
当前窗口 48h 已导入 30 条新反馈;跳过 0 条,文件内重复 0 条。
操作者:system
-
导入反馈
基线窗口 48h 已导入 30 条新反馈;跳过 0 条,文件内重复 0 条。
操作者:system
-
创建观察任务
已创建 v2.3 → v2.4 的版本观察任务。
操作者:human