Repository navigation
Conversation
🤖 Open Code ReviewTarget: PR #815 🔍 OpenCodeReview found 61 issue(s) in this PR.
1.
|
|
| || !rawTurn || rawTurn.toolCalls.length < SPAN_BIG_TURN_MIN_TOOL_CALLS)) { | ||
| retireSourceSpans(this.deps.repos, saved.id, [], at, this.deps.namespaceIdFromMemory); | ||
| } | ||
| if (payload.downstreamScheduled !== true && savedTrace && this.deps.isTraceEligibleForL2(savedTrace)) { |
There was a problem hiding this comment.
Episode 重开后被判失败,旧的 Policy 和 Skill 统计贡献没有撤回
问题
一个 Episode 首次关闭时获得正奖励,已经计入某条 Policy(归纳经验)的支持数和关联 Skill 的可信度 η;继续该任务、重开并再次关闭后,如果它被判失败,旧的正向贡献仍然保留。本轮补充测试预置三个来源及其已有关联,再通过 completeTurn、任务选择、自动关闭和真实 worker 执行成功→重开→失败,未手动排入奖励或关联任务。Episode 奖励从 0.9 变为 -0.9,原 Trace(回合记录)的 value 降为约 -0.4385,但 Policy 支持数仍为 3,未降到剩余两个有效来源对应的 2;gain 和 Skill η 也保持原值。目标 base 同样复现,属于本次来源替换的修复遗漏。
原因
奖励写回后,这里只为仍满足 L2 证据门槛的 Trace 排入 l2_association。失败来源已经低于门槛,原来的 Trace–Policy 关联虽然还在,却没有任务重算已保存的统计;仅补排现有任务也不够,关联入口 (line 480)还会因相同资格检查直接返回。此外,统计重算 (line 756)在支持数归零时跳过 Skill 数值回放,最后一份有效证据被撤回的情况也需要一起处理。
建议做法
奖励变化时,根据已有 Trace–Policy 关联重算受影响的经验,使不再合格的来源能撤回旧贡献,并继续保留其他 Episode 的贡献。同步重算关联 Skill 的 η,处理支持数归零后的状态,同时保留后续 trial 和人工检查点。补充正常成功→重开→失败、最后来源失效、失败后恢复成功及仍成功时重复处理的回归,验证支持数、gain、η 与仅按最终有效证据处理一次一致。
Integrate current v1.2.7 while retaining unified extraction and content revision guards. Recompute existing legacy policy consumers on reward changes, replay zero-support and restored contributions, and cover real lifecycle transitions.
| .filter((link) => { | ||
| const target = this.deps.repos.memories.get(link.l2MemoryId); | ||
| return target && link.relation === l2SupportRelation(target); | ||
| return target && (this.deps.config.algorithm.l2Induction.mode === "legacy" |
There was a problem hiding this comment.
切换到 unified 后,旧关联来源改判失败仍保留成功贡献
问题
说明场景:已有一条由两份成功 Episode 支持的 Policy(可复用经验),第三份 Episode 通过旧版关联流程加入它;随后服务切换到当前默认的 unified 模式。第三份 Episode 被重新打开、补充对话并再次关闭,这次判为失败。预期撤掉第三份 Episode 的贡献,保留另外两份;实际支持数仍为 3,Policy gain 和关联 Skill 的 η 也保持旧值。
本轮用隔离 SQLite、真实关联 worker 和公开的 completeTurn、reloadConfig 入口复现了这个顺序,模型和向量使用替身。第三份来源的关联由产品代码生成,类型为 matches_signature;改判后 Trace value 已为负,支持数仍为 3。保持 legacy 的相邻对照则正确降为 2。准确 base 也存在此问题,因此这是本次修复的兼容性遗漏,不是新引入的回归,也不涉及批量清理历史数据。
原因
旧版 Policy 关联流程 (line 454) 写入 matches_signature 或 similar_pattern。这里在 unified 模式下只接受当前 l2SupportRelation 返回的 supports/supports:rN,把这些仍在贡献的旧关联排除在受影响 Policy 集合之外。新的失败奖励已保存,但该 Policy 没有进入后续重算,所以旧统计和 Skill 贡献保留下来。
建议做法
在本次来源重新评分时,按 Policy 的记录格式和当前有效来源判断需要重算的消费者,兼容仍有效的旧关联类型;同时保留新版内容修订的关联隔离,避免让旧正文的支持重新生效。用“两份原有支持+第三份真实关联 → 切换 unified → 第三份重开后改判失败”验收,检查支持数变为 2、其来源退出统计、gain 和 Skill η 按剩余贡献重算,并覆盖不切换模式和新版 supports:rN 的对照。
| const linkedTraces = allTraces.filter((trace) => linkedTraceIds.has(trace.id)); | ||
| const evidenceTraces = linkedTraces; | ||
| if (evidenceTraces.length === 0) { | ||
| if (unifiedEvidence && evidenceTraces.length === 0) { |
There was a problem hiding this comment.
unified 撤掉最后一份支持时,没有撤回 Skill 的 η 贡献
问题
说明场景:unified 模式正在使用一条旧格式的成功经验及其关联 Skill。这条经验最后一份有效成功来源被重新打开、再次关闭并改判失败。预期该来源退出 Policy 统计,同时撤回它此前对 Skill η(可信度数值)的影响;实际 Policy 支持数已从 1 变为 0、状态变为 quarantined,Skill η 却仍为 0.752。
本轮通过公开完成对话、Episode 归属和自动关闭流程、真实 worker 与隔离 SQLite 复现,初始 Policy/Skill/supports 关联由测试夹具准备,模型和向量使用替身。Skill 本轮贡献前的 η 为 0.8,成功处理后为 0.752;失败后 unified 仍为 0.752,legacy 对照已恢复到 0.8。准确 base 同样保留 0.752,属于上轮问题仍未修完的边界。此结论限定于已验证的旧格式成功经验,不要求把新版负经验的有效证据按成功奖励门槛删除。
原因
新的奖励流程已经请求重算这条 Policy,但此处 unified 的零证据分支保存隔离状态后直接返回,没有执行后面的贡献回放和 onSkillRewardDrift。因此 Policy 已明确没有来源,Skill 中本轮记录的对应贡献却仍有效。此次改动让 legacy 的零证据情况继续回放,但 unified 仍走原来的提前返回。
建议做法
零证据状态也应完成可追溯贡献的撤回,再结束事务:同步更新 Policy 与关联 Skill,保留其他 Policy、trial 和人工检查点的独立影响。对缺乏可验证历史的记录继续采用已有保守策略,不做全库回填。回归覆盖最后一份支持撤回、仍有其他支持、同一来源再次恢复成功和重复执行,断言最终 η 与只保留有效贡献的结果一致。
…tematic-review # Conflicts: # Memory/src/service/trials/skill-trial-resolver.ts
|
| import { byokRuntimeConfig, createMemoryServiceFixture } from "../../../../../Memory/tests/fixtures/memory-service-fixture.js"; | ||
| import { createHttpMemoryRuntimeClient } from "../../../../frontend/desktop/src/api/memory-runtime-client.js"; | ||
| import { createHttpMemoryClient } from "../../adapters/outbound/memory-client/http-memory-client.js"; | ||
| import { createLocalApiServer } from "../../adapters/inbound/local-api/server.js"; |
There was a problem hiding this comment.
两份新增 HTTP 集成测试导致根级 lint 失败
同一问题还在 desktop-support-contribution.integration.test.ts (line 14)。
问题
执行根目录的 npm run lint 失败。预期两份新增的 HTTP 集成测试也能通过现有代码规则;实际每份各报一个 import/no-restricted-paths 错误,命令退出 1,提示 services 层不能反向依赖入站适配器。
原因
测试放在 src/services/tests,却直接导入 adapters/inbound/local-api/server.js 来启动 HTTP 服务器。仓库 ESLint 的依赖方向规则覆盖这个测试目录,禁止 services 层反向依赖入站适配器,所以新增导入被拒绝。
建议做法
将这两份需要跨层启动服务器的集成测试移到既有的 App/backend/src/tests 等集成测试目录,调整相对导入,保留 renderer client→Backend→Memory 的完整链路断言。不要关闭依赖方向规则或删除原断言。用最终提交的根级 npm run lint 和这两份集成测试共同验收。
| panelAnalysis(context?: MemoryRequestContext): Promise<PanelAnalysisOutput>; | ||
| panelItems(input: PanelItemsInput, context?: MemoryRequestContext): Promise<PanelItemsOutput>; | ||
| panelTasks(input: PanelTasksInput, context?: MemoryRequestContext): Promise<PanelTasksOutput>; | ||
| taskExperienceProcessing(taskId: string, context?: MemoryRequestContext): Promise<TaskExperienceProcessing>; |
There was a problem hiding this comment.
公共测试客户端缺少方法导致类型检查失败
问题
运行目标分支工作流要求的 tsc -p App/backend/tsconfig.plugin-tests.json --noEmit。预期现有插件测试使用的公共 Memory 客户端仍符合接口;实际报 TS2739:App/backend/src/tests/support/mock-memory-client.ts:37 返回的测试客户端缺少 taskExperienceProcessing 和 retryTaskExperienceProcessing,即新增的“查询经验生成状态”和“重试经验生成”方法。
原因
这里将两个新方法设为 MemoryClient 的必选成员。真实 HTTP 客户端已经实现,但公共测试客户端工厂仍只返回旧接口。v1.2.8 的 plugin-host/Teach Host 检查通过独立 tsconfig 收集使用该工厂的测试,因而发现缺少方法。
建议做法
同步公共测试客户端工厂及其契约测试,为查询、重试返回符合当前输出格式约定的数据,保留现有插件和账号相关场景的契约。不要为了绕过检查,随意将产品调用所需的方法改为可选。以目标分支的 plugin tests 类型检查、公共 mock 契约测试和新增恢复接口测试共同验收。
| for (const id of episodeIds) { | ||
| const episode = this.deps.repos.runtime.getEpisode(id); | ||
| if (episode) this.deps.repos.runtime.updateEpisodeMeta(id, { | ||
| clusterProcessedFeatures: this.processedFingerprint(episode.meta.clusterFeatures as EpisodeSkillFeatures | undefined) |
There was a problem hiding this comment.
技能重建草稿被拒绝后仍记为已处理,再次反馈无法重新生成
相关代码:同文件第 238、338–352 行。
问题
说明场景:Memmy 中已有一份汇总 Excel 的技能,也就是一份可复用的操作说明,当前由两次成功任务支持。调用方后来反馈其中一次任务验收失败,系统准备根据新证据重写这份说明。
如果这次生成的草稿未通过内容检查,新正文就不会保存。预期应保留“重建尚未完成,可以重试”的状态;实际却同时把这份任务证据记为已处理、把生成任务记为成功。之后再次提交相同的失败反馈,系统会跳过生成,数据库中仍保留旧正文和“需要重建”的标记。
原因
草稿校验失败后仍调用 markProcessed,把当前任务内容的校验值保存为“已经处理过”。下一次调度发现内容未变,就保留已处理记录,并在 newEpisodeIds.length === 0 时提前返回,没有检查 direct_evidence_rebuild_required 这个“正文仍需重建”的标记。
因此,数据库实际记录的是“旧正文还在、重建没有完成”,调度代码读取到的却是“这份任务证据已经处理”,导致后续相同反馈无法触发重建。
建议做法
对于需要替换技能正文的任务修订,只有有效正文成功提交后,才能一起保存已处理标记。草稿校验失败时保留待重建记录,并按现有策略记录失败、安排有界重试;相同内容的去重判断也应检查是否仍有未完成的重建。继续保护人工修改、归档、其他任务贡献和技能试用结果。
回归沿用同一场景:先拒绝第一次替换草稿,再让模型替身返回有效草稿,重新提交相同失败反馈。应重新请求生成、成功保存新正文并清除待重建标记;成功后的重复反馈应保持幂等,失败尝试不能被提前记为成功。
问题与修复
同一 Episode 关闭、重开并再次关闭后,应替换该任务之前的派生结果和数值贡献。任务从成功改判失败、再恢复成功时,旧贡献必须撤回并恢复,不能把同一任务当成新来源重复累计,也不能抹掉其他任务、独立反馈或人工修改。
本次统一旧式与 unified 经验处理、直接生成 Skill 与经验派生 Skill 两条路径:
不改变任务重开条件、两小时规则或合并窗口,不升级依赖或迁移数据库表结构。
v1.2.8 兼容修正
合入目标分支 v1.2.8 的
d6a7888356ede310e44063aad1f2c01007c29072,解决旧 PR 与新版的冲突,并统一历史账号记录与本机记录混合时的证据、统计和恢复逻辑:本轮验证
已验收并提交的版本:
635a8aff75f3cc91d0b0bb0715fd8434c03162d6。该提交包含旧 PR 头64f0aad5和上述 v1.2.8 基线。提交前通过远端 refs 确认目标分支仍为d6a78883。DMG SHA256:
fda7fba59a6004c87d304f5f0f466102e0312cb9348decd86972a5f13aa48eca。已知问题与验收边界
d6a78883各验证 3 种场景:无缓存时目录准备 45 秒超过前端 30 秒确认时限,迟到接受仍执行;有缓存对照正常。测试通过表示复现成立,不能当作该问题已修复;真实云端目录失败原因及完整网关/界面恢复未查明。本轮真实 GUI 的 4 次发送分别只执行一次,未通过重复点击重发。关联与来源
云效 MEMMY-647:https://devops.aliyun.com/projex/bug/df818a432a7af099435e39fdd4
接手 #740 的修复用途,旧 PR 保持不动。部分贡献回放组件、片段/分簇逻辑及用例参考 yxyi123 的 #740(660b3b9c),对应文件头保留来源说明;未整体合并旧 PR。本轮按用户要求不修改云效。