lzf_0626
6516ccb385
相对第一版 46fc976 的完整变更。组员迁移对照表见 docs/20。
一、对外契约对齐 docs/05（破坏性，共 4 处，组员需按 docs/20 调整）
1) 配置发布端点改为文档规定的复数资源名：submit→validations、
approve→reviews（需 body decision）、activate→activations、
rollback→rollbacks；第一版这 4 个动词式路径 docs/05 从未定义过。
2) 错误码由 8 个笼统码改为 15 个具体语义码（FORBIDDEN→AGENT_PERMISSION_DENIED、
UNAUTHORIZED→AUTHENTICATION_REQUIRED、CONFLICT→RESOURCE_VERSION_CONFLICT、
RESOURCE_NOT_FOUND→RUN_NOT_FOUND/SESSION_NOT_FOUND 等），
输入类错误状态码 400→422。
3) POST /api/v1/agent-runs 与 GET /api/v1/agent-runs/{run_id} 统一为
{data, meta} 信封（data 内字段名与语义未变）。
4) 错误响应体统一为 {error:{code,message,retryable,field_errors}, meta:{trace_id}}，
不再返回 FastAPI 默认的 {"detail": ...}。
二、数据库基线与约束
新增 39 张表的基线迁移（链根）与联合唯一键纠偏（4 张表、删 8 增 4，幂等收敛）；
撤下 config_release 的双人复核 CHECK（应用层已允许自审，审核节点保留，
自审如实写入 reviewer_id）；记忆 active key 生成列与唯一键；
activate 开始记录 supersedes_release_id 使版本链可追溯。
docs/00 基线未修改，未重命名或删除任何表与字段。
三、修复会静默出错或无报错的缺陷
- 跑完集成测试后平台会静默失去生效配置：清理只删自己创建的版本，却没有恢复被它
顶成 superseded 的原生效版本，且审计一并删除因而完全无痕，表现为所有工具被拒
但没有任何报错。已修清理逻辑并加恢复。
- Worker 单轮异常导致进程退出；记忆抽取调用方的“事务已开始”异常；
召回缓存丢失 degraded 标记；连接时区未生效导致 created_at/updated_at 差 8 小时；
.env 与 os.getenv 密钥来源分裂导致“没有可用的已批准模型端点”。
- 记忆信号识别漏判与跨键误命中；SSE 未带 Accept 的协商行为。
四、功能补齐
记忆链路 P1/P2/P3（抽取、受控词表、召回与缓存、生命周期级联及投影事件）、
fin_* 场内交易只读 ORM 层、agent_intent_config 状态流转并在运行期真正生效、
限流（Redis 固定窗口、故障一律放行）、游标校验、trace_id 中间件、
示例业务 Agent fund_query_demo 与一键端到端验证脚本，以及审计/指纹/迁移状态工具。
五、文档与验证
新增 docs/19（业务 Agent 接入实操）、docs/20（第一版迁移指南）与 docs/evidence 证据；
docs/01/02/06/08/09/17 同步实现现状。
验证结果：ruff 通过、mypy 103 文件无错、unit+contract 447 passed、
integration 29 passed、acceptance_check --production 7 PASS、
demo_agent_e2e 9/9 PASS（含失败关闭反证）。
97 lines
3.9 KiB
Python
97 lines
3.9 KiB
Python
"""限流计数后端：Redis 固定窗口计数，**Redis 不可用时一律放行**。
|
||
|
||
取舍（为什么是固定窗口，而不是 ZSET 滑动窗口或令牌桶）：
|
||
|
||
- 固定窗口用一条 `INCR` + `TTL` 就能原子地完成"计数 + 取重试等待时间"，不需要 Lua
|
||
或事务，故障面最小；滑动窗口要 `ZREMRANGEBYSCORE`/`ZADD`/`ZCARD`/`EXPIRE` 四条命令
|
||
才能近似原子，令牌桶还要在服务端保存补充速率的状态。本平台的限流目的是**保护**
|
||
底座不被单个客户端打爆，不是做精确计费，窗口边界最多放过一个窗口的量可以接受。
|
||
- 计数键带 TTL，Redis 自己回收，不需要额外的清理任务，也不会留下永久脏键。
|
||
|
||
降级语义（用户要求，也是 `MemoryCacheAdapter` 的同一原则）：限流是保护措施，不能因为
|
||
Redis 故障把正常请求全部拒掉。因此后端**只返回 `None` 表示"无法判定"**，由调用方放行；
|
||
这里绝不抛异常、绝不返回"计数超限"。
|
||
|
||
Redis 客户端是**懒建**的：进程启动时 Redis 不可用不应该让应用起不来，第一次真正需要
|
||
限流判定时才建连（与 `bootstrap.py` 的记忆缓存适配器一致）。
|
||
"""
|
||
|
||
import logging
|
||
from typing import Any, Protocol
|
||
|
||
from app.core.config import get_settings
|
||
|
||
logger = logging.getLogger(__name__)
|
||
|
||
|
||
class CounterBackend(Protocol):
|
||
"""限流计数后端。
|
||
|
||
`increment` 返回 `(窗口内计数, 剩余秒数)`；返回 `None` 表示后端不可用，
|
||
调用方必须**放行**（fail-open）。
|
||
"""
|
||
|
||
async def increment(self, key: str, window_seconds: int) -> tuple[int, int] | None: ...
|
||
|
||
|
||
class RedisCounterBackend:
|
||
def __init__(
|
||
self,
|
||
redis_url: str,
|
||
*,
|
||
connect_timeout_seconds: float,
|
||
client_factory: Any | None = None,
|
||
) -> None:
|
||
self._redis_url = redis_url
|
||
self._connect_timeout_seconds = connect_timeout_seconds
|
||
# 注入点仅用于测试：默认走 `redis.asyncio.Redis.from_url`。
|
||
self._client_factory = client_factory
|
||
self._client: Any | None = None
|
||
|
||
async def _client_or_none(self) -> Any | None:
|
||
if self._client is not None:
|
||
return self._client
|
||
try:
|
||
if self._client_factory is not None:
|
||
client = self._client_factory()
|
||
else:
|
||
from redis.asyncio import Redis
|
||
|
||
client = Redis.from_url(
|
||
self._redis_url,
|
||
socket_connect_timeout=self._connect_timeout_seconds,
|
||
socket_timeout=self._connect_timeout_seconds,
|
||
decode_responses=True,
|
||
)
|
||
self._client = client
|
||
except Exception:
|
||
logger.warning("限流后端不可用：Redis 客户端构造失败，本次降级放行", exc_info=True)
|
||
return None
|
||
return self._client
|
||
|
||
async def increment(self, key: str, window_seconds: int) -> tuple[int, int] | None:
|
||
client = await self._client_or_none()
|
||
if client is None:
|
||
return None
|
||
try:
|
||
async with client.pipeline(transaction=False) as pipe:
|
||
pipe.incr(key)
|
||
pipe.ttl(key)
|
||
count, ttl = await pipe.execute()
|
||
remaining = int(ttl)
|
||
if remaining < 0:
|
||
# 键首次创建（或历史上丢过 TTL）：补一次过期为窗口长度。
|
||
await client.expire(key, window_seconds)
|
||
remaining = window_seconds
|
||
return int(count), max(1, remaining)
|
||
except Exception:
|
||
logger.warning("限流后端不可用：Redis 计数失败，本次降级放行", exc_info=True)
|
||
return None
|
||
|
||
|
||
def default_counter_backend() -> CounterBackend:
|
||
settings = get_settings()
|
||
return RedisCounterBackend(
|
||
settings.redis_url, connect_timeout_seconds=settings.redis_connect_timeout_seconds
|
||
)
|