Skip to content

acceptance: Qwen-Image 单次知识检索流程 A/B 记录 #471

Closed as not planned

Description

@jiaran-king
No description provided.

Activity

  1. amy-why-3459 commented on Nov 16, 2026

    @amy-why-3459
    Collaborator

    感谢把这次 Qwen-Image 检索对照补建为验收记录,并把结论明确写成 INCONCLUSIVE。这里已经写清:这是运行后、公开汇总前补建的记录,没有预先冻结整体优劣的数值门槛;每组只有一次 Agent 自写查询;A/B 串行,且检索语料、交付方式和预算并不相同;题包 final 质量检查通过,也不等于检索质量、真实图像生成或服务性能验收通过。这些边界是清楚的。几点建议:

    1. 这份记录与 tracking: Skill Indexer 检索效率、准确性与逐轮采用 #379 / feat(knowledge): unify search across cases, skills, and records #466 的关系。 当前 tracking: Skill Indexer 检索效率、准确性与逐轮采用 #379 仍是 status: proposed,产品决定仍是暂不把短指引推广为默认入口。这次只有单次会话、且多个对照因素同时变化,不能单独作为接受 find → read 为产品默认入口、或推动 feat(knowledge): unify search across cases, skills, and records #466 合入的依据。请在本 Issue 写明:维护者若“接受相关证据”,接受的是哪一类结论(例如仅作为一次观察记录,还是作为某项产品决定的支持证据)。

    2. 对照因素未隔离,不宜把采用数差异归因于检索入口。 feat(knowledge): unify search across cases, skills, and records #466 描述里 A 的上下文预算为 16,384 字节,B 从预览中选择并读回正文;查询由各会话自行写出,并不相同。因此 B 的「1 次查询 / 5 条返回 / 打开并采用 2 项」相对 A 的「读取 1 项、采用 0 项」,不能归因于 find → read 相对 weighted-lexical-v1 本身。双方共用的任务结果仍是题包 final 质量检查均为 PASS。若维护者决定追加受控重复,请先冻结:除检索入口外哪些条件必须保持一致、主指标是什么、查询集是预注册还是允许现场自写,以及顺序和设备状态如何处理(正式 A 前有一次中止的 Sol/high 会话,A 后又串行跑 B;该中止会话的结果虽未纳入比较,设备与缓存状态仍可能有影响)。

    3. 验收记录应自包含可核验信息。 详细对照表和被采用材料的 ID / revision 目前写在 feat(knowledge): unify search across cases, skills, and records #466 的 PR 描述中,而 PR 正文还会继续改。本 Issue 作为验收记录,建议把关键数字、查询文本(或其哈希)、返回项、采用的材料及 revision,以及「尚未公开完整 evidence tree」的范围,在本 Issue 或一份不再随 PR 改动的附件里固化。否则外部读者无法在不依赖可变 PR 正文、也无法访问私有 evidence 的情况下核验这些数字。我对照了本 Issue 与 feat(knowledge): unify search across cases, skills, and records #466 当前描述中的采用数,二者是一致的。

    4. 负责人。 “是否追加受控重复验证、是否接受相关证据”需要有明确的验收负责人来记录决定。目前尚未指定,请补上;我不会在这条评论里代为指定。

    我没有核验私有环境中的原始会话或 evidence/ 树。是否接受这份记录,请由指定负责人决定。

  2. changed the title [-]acceptance: Qwen-Image 单次知识检索流程 A/B 记录[/-] [+]已撤销[/+] on Nov 16, 2026
  3. changed the title [-]已撤销[/-] [+]acceptance: Qwen-Image 单次知识检索流程 A/B 记录[/+] on Nov 16, 2026
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Type

    No type

    Projects

    No projects

      Milestone

      No milestone

      Relationships

      None yet

      Development

      No branches or pull requests

      Issue actions