Files
group_fqcd_jr/AGENTS.md
T
wangjianlong_0626 8a0cbab636 fix(memory-projection): 订正 outbox 取值口径并接通画像投影链路
背景:memory_sync_outbox 这条链此前**完全没有消费者**,且生产端照 docs/00 §6.4.6
写成大写 MILVUS/NEO4J + 中文「待处理」,而消费端按 target_store 的**值**分派 handler、
且只领 status in {pending, failed} —— 两个条件都不满足,事件任何消费者都领不到、
永久滞留且不报错(唯一键 (event_uuid, target_store) 对大小写无约束,MySQL 也不报错)。
根因是代码与测试都硬编码字面量,所以测试跟着一起错、谁也没拦住。

订正
- profile_generation_service:取值改为全仓一致的小写(milvus/neo4j/upsert/pending)
- 测试改为引用常量并断言消费端契约,不再硬编码(硬编码是本次跑偏的直接原因)
- 新增契约回归测试:断言大写值分派不到 handler、会进死信,谁改回大写立刻红
- 新增 tools/normalize_memory_sync_outbox.py:订正历史脏行(默认 dry-run、幂等)

接通投影链路(此前零消费者)
- 新增 Milvus 集合 user_long_term_memory_v1 及建集合工具(幂等、不覆盖已有集合)
- 新增 MilvusProfileProjection / MilvusProfileVectorClient,并修掉移植带来的两处必炸点:
  customer_id 由「必须 int」放宽为接受数字字符串(本仓所有生产者都写 str,
  不放宽则每个事件必然失败);不可投影的 memory_key 由「整批 raise」改为跳过留痕
  (否则一条 constraint: 记忆毒死该客户整批,而受控词表 13 个键里有 7 个不满足前缀)
- 新增 MemorySyncOutboxWorker(领取/指数退避/死信骨架保留原样)并接入 WorkerRuntime
- milvus → 向量投影;neo4j → 复用主干 ProfileGraphProjectionService(方案 A,
  不引入第二套投影,避免同一事实在图中两种说法、违反主干既有的只投影已确认事实的不变式)
- 生产端从 memory_unit(status=active) 组装 memory_sources,随事件带上确定快照
- 前置移植 conversation_privacy:写外部存储前脱敏手机号/证件号/银行卡等

验证
- 新增 17 个单测;全量 2 failed, 1307 passed, 2 skipped
  (2 个失败为既有环境项:断言请求体中文原文而 httpx 序列化成 \uXXXX,非本次引入)
- mypy app → 0 错(227 文件);audit_schema → 89 张业务表无缺失/意外,未改动表结构
- 真机:真实 embedding(1024 维) + 真实 Milvus 写入并回读通过
- 整合链路(测试记忆 → 生产端组装 → outbox → 消费端投递 → Milvus 回读)通过,
  且 MySQL 已回滚、Milvus 无残留

文档
- 新增 docs/32-记忆投影链路实现说明.md:真实口径、根因、契约与验证证据(供接手)
- AGENTS.md:新增该易错点;新增 Windows 中文输出乱码的正确命令(-X utf8);
  校正测试基线与 mypy 文件数

未做:未改 docs/00 基线、未动数据库迁移、未改投顾线代码、未启动常驻 Worker。
遗留:投顾线两处生产者的 payload 缺 memory_sources,会被消费至死信,待架构师确认是否投影。
2026-09-12 10:45:40 +08:00

11 KiB
Raw Blame History

项目级开发约束

以下规则对人工开发者和编码 Agent 均为强制约束:

  1. 数据库以 docs/00-新数据库基线设计.md 为不可变业务基线。
  2. 允许创建新表,允许在已有表中增加新字段。
  3. 禁止重命名或删除已有表。
  4. 禁止重命名、删除、复用已有字段,禁止改变已有字段的类型、可空性和既有业务含义。
  5. 历史结构无法满足新需求时,使用新增字段、新表、兼容视图或应用双读解决。
  6. 架构固定使用 MVC+S;Agent 属于 Service 层。
  7. 业务 Agent 必须继承公共 BaseAgent 并由 AgentFactory 创建,不得绕过公共鉴权、记忆、模型路由、工具、合规、审计和事件流程。
  8. 当前系统业务功能只针对场内基金模拟交易;场外基金运营流程独立,不得写入场内交易表。

修改数据库文档或迁移前,必须对比基线并证明没有改变任何已有表名和已有字段定义。


📖 接手先读(按此顺序,只读这些就够)

⭐ 第 0 步先读这个:docs/superpowers/handoff/2026-09-11-交接文档-客服Agent与RAG收尾.md —— 客服 Agent + RAG 这条线的交接文档(含合并完成后的第二次更新):环境口径、交付内容与 可复现验证证据、合并后修掉的 3 个真机故障、已知问题清单(逐条标注当前状态)、Git/PR 状态。 当前工作分支是 NL_develop(个人分支 → PR 合回 qyqy_develop),不要再用 6516ccb。 它是对"当前状态"最准确的一份,读完它再读下面这些。

⚠️ 文档现状(2026-09-11 第二次修订):本文件原先声明"已删除 5 份编号文档", 那条已作废 —— 经评审,docs/04/06/10/13/99 全部保留(架构师明确要求保留: 删除收益为零,而保留成本同样为零)。它们的内容未被核对过、可能过期, 因此列在下面的 D 类"不要用来判断当前进度"里,只作历史参考。 被删除的只有 10 份过程产物,理由与清单见 docs/superpowers/ARCHIVE-2026-09-11-文档清理归档.md。

A. 核心 7 份(无论接手哪条线都必读)

序 文档 承载的唯一权威内容
1 docs/00-新数据库基线设计.md 不可变业务基线:表/字段业务语义的唯一来源
2 docs/05-接口文档.md 接口唯一权威:信封/错误码/幂等/SSE、§8.3 知识库管理三端点、§8.4 四个只读工具索引与两段式白名单
3 docs/01-通用Agent平台开发设计.md MVC+S 分层约束、BaseAgent 执行骨架、AgentFactory
4 docs/02-数据库建表设计.md 51 张业务表总览 + DDL + §8 幂等与 Outbox 语义
5 docs/03-平台端到端流程文档.md 一次请求从受理→Worker→审计→事件的全链路与降级矩阵
6 docs/08-数据库结构审计基线.md 三个审计工具 + migration_state_check 的职责;"证明未改基线"的证据出处
7 docs/07-测试问题修复记录.md 无替代:P0-1/2/3 鉴权与 Worker 租约闭环、P1-1~P1-5(含 api_request_receipt 事务幂等)

B. 按角色补充

你接手的是 再读这些
客服 Agent + RAG 这条线 docs/14(接入入口)→ docs/18(RAG 三集合路由方案)→ docs/19(可运行示例)→ docs/09(底座用法与四工具)
整个底座 补 docs/20(第一版→当前的破坏性改动 + §5 四条尚未修复的偏差 + "跑验收前先停常驻 Worker")
只改某个业务域 docs/00 → docs/05 → docs/02 → docs/14 → docs/19;行情加 docs/12,前端/联调加 docs/17
看"现在做到哪了" docs/验收与审计/phase1-acceptance-report.md(Phase 1 七条验收标准的逐条可复现证据)+ 同目录 phase1-acceptance-criteria.md(老师验收标准原文摘录)

注:完整的过程台账(progress.md、各 Task 报告、审计报告)在 .superpowers/sdd/2026-09-10-客服Agent与RAG-qyqy版/, 但该目录被 .gitignore 忽略(属工作区过程产物)—— 因此结论性文档已复制到 docs/验收与审计/ 以保证 git 可见。 若要查过程细节再去看 .superpowers/;日常接手只需读本文档列出的这些。

C. 同主题的重复文档(读一份即可,避免信息冲突)

主题 唯一权威 重复品(仅历史参考)
Agent 组员接入 docs/14 docs/11(旧版说明书)、docs/15(详细手册)、docs/16(入门易懂版)—— 三份已各自在开头标注"以 14 为准"
接口说明 docs/05 docs/17(易懂版,自述"不替代 05")

D. ⚠️ 不要用来判断"当前进度"

文件 为什么
TODO.md 自 2026-09-09 起未随 Phase 1 更新:5 处"49 张表"(实为 51 张业务表)、T8.1 客服 Agent 整节未勾选但已交付、多处标"进行中"其实已完成。当前进度一律以 phase1-acceptance-report.md 为准。
docs/04 / 06 / 10 / 13 / 99 内容未核对过、可能过期(自相矛盾 / 结论失效 / 清单不全)。经 2026-09-11 评审保留(不再删除),仅作历史参考。不要用它们判断现状

E. 环境与命令口径(易错点)

  • 解释器:本机用 .\.venv\Scripts\python.exe;架构师环境用 D:\conda\envs\jr_py313\python.exe。 两者等价,各用本机可用的那个(.venv 被 .gitignore 忽略、不进仓库,不存在"需要统一"的问题)。

  • ⚠️ Windows 控制台跑测试请加 -X utf8,否则中文输出是乱码:

    .\.venv\Scripts\python.exe -X utf8 -m pytest tests -q
    

    原因:本机控制台是代码页 936(GBK),Python 的 sys.stdout.encoding 随之为 gbk, 而终端按 UTF-8 解码 ⇒ 中文(断言消息、docs/ 中文文件名、测试内 print)全部乱码。 乱码只影响"显示",不影响测试结果(passed/failed 计数是英文,照常可信)。

    为什么必须用 -X utf8 而不是别的办法:

    • chcp 65001 单独无效(Python 仍以 GBK 输出,终端按 UTF-8 解码,反而更乱);
    • 在 tests/conftest.py 里 sys.stdout.reconfigure(encoding="utf-8") 只能修测试内部的 print, 修不了 pytest 自己的输出(失败摘要、短测试摘要)—— pytest 的终端写入器在启动时就绑定了编码, 早于 conftest 被加载。实测两组对照:摘要照样乱码。
    • -X utf8 在解释器启动时生效,早于 pytest 的一切,且只影响当次进程、无副作用。
    • 等价替代:环境变量 PYTHONUTF8=1 或 PYTHONIOENCODING=utf-8(PyCharm 用户可写进 Run Configuration)。 同一原因,跑 tools/*.py 等脚本时也要加 -X utf8(例如 python -X utf8 tools\check_authoritative_docs.py)。
  • 数据库现为 69 张表(含 alembic_version)= 68 张业务表 = 场内 51 + 场外/推广 17。 后 17 张(offsite_* / promotion_*)不进 docs/00 基线(规则 8:场外基金运营流程独立), 逐表登记见 docs/28-场外与推广域数据表登记.md。核验命令:python tools/audit_schema.py。

  • 已注册业务 Agent:FundQueryDemoAgent、CustomerServiceAgent、RiskAgent、PlatformProbeAgent(见 app/service/agent/bootstrap.py)。

  • 已注册公共只读工具:search_knowledge(客服知识检索)、check_suitability、query_customer_profile(画像)、query_fund_quote; 工具可用范围 = 代码上限 ∩ 当前 active config_release 的发布白名单,缺发布配置则失败关闭。

  • ⚠️ config_release 是环境数据,不随代码合并:本机 active 版本 id 与架构师环境不同 (本机是我方发布的客服白名单;他那边还有风控的 9 条白名单)。"白名单已发布"必须带环境限定,换环境要重发。 发布脚本 tools/publish_customer_service_config.py(同 key 的继承项必须被本次定义覆盖,否则旧值会被子集校验 422 拦下整次发布)。

  • ⚠️ Milvus 集合 schema 也因环境而异:本机是 knowledge_id/snippet(无 visibility), 架构师环境是 doc_id/content/visibility/chapter…。检索层已改为运行时探测字段名 (app/core/knowledge_schema.py)——不要在任何地方硬编码字段名,那会把另一套环境打挂。

  • ⚠️ Docker Desktop 不会常驻:它没运行时 Milvus 不可用(docker CLI 报连不上守护进程)。 跑真机验证前先确认 Docker Desktop 在运行。

  • ⚠️ memory_sync_outbox 的取值必须是小写英文(milvus/neo4j、upsert、 pending/failed/processed/dead)。docs/00 §6.4.6 那一栏曾写作大写 MILVUS/NEO4J、UPSERT + 中文 待处理,与全仓实现从未对齐,照它写会静默失效: 消费端按 handlers.get(target_store) 分派、且只领 status in {"pending","failed"}, 大写 + 中文两个条件都不满足 ⇒ 事件任何消费者都领不到、永久滞留且不报错 (唯一键 (event_uuid, target_store) 对大小写无约束,MySQL 也不报错)。 取值口径以主干既有读取方为准(projection_reconciliation_service.py、 graph_projection_worker.py),不是文档。详见 docs/32-记忆投影链路实现说明.md。

  • 测试基线:2 failed, 1307 passed, 2 skipped(2026-09-12 记忆投影链路落地后实测; 此前为 3 failed, 1219 passed——第 3 个失败 tests/unit/repository/test_fund_readonly_contract.py 已由投顾线合入主干时修复,不要再当既有缺陷引用)。 剩下 2 个失败都不是代码缺陷,接手时不要"修"它们: tests/unit/service/test_offsite_document_recognition_adapter.py 的 2 个用例 —— 环境相关: 它们断言请求体里是中文原文,而 httpx 会把中文序列化成 \uXXXX,字节序列自然不匹配。 功能无影响;若要修,正确做法是断言 json.loads(body) 后的字段值(字节级断言不该用来测 JSON)。

  • mypy:mypy app → Success: no issues found in 227 source files(0 错)。 ⚠️ 曾在本机报 184 个错,已查明是环境版本旧,与代码质量无关 —— 复现矩阵:

    SQLAlchemy mypy 报错数
    2.0.34(本机旧) 1.14.1 173
    2.0.34 1.20.2 173
    2.0.52 1.14.1 6
    2.0.52 1.20.2 0(当前)

    ⇒ 主因是 SQLAlchemy 的补丁版本(旧补丁版类型标注不完整,BIGINT/DATETIME 被判成未类型化 函数,app/model/*.py 每个列定义报一条)。不要装 sqlalchemy2-stubs —— 那是给 SQLAlchemy 1.4 用的,装上会按 1.4 API 核对 2.0 代码、换一批新错。 pyproject.toml 的 sqlalchemy>=2.0,<3 允许范围内补丁版差异会造成量级差异; 若门禁数字要求稳定,需把 SQLAlchemy 钉到具体补丁版(属公共约定,改前先问)。