feat(memory,conversation): 记忆富化/证据包、时间线幂等字段与对话分段全链路

数据库
- 新增迁移 0003:timeline_events.memory_source_id 外键 → memory_sources,便于按 ingest 源做时间线幂等

后端 - 记忆
- 新增 ingest 后 LLM 富化(摘要/事实/时间线),可配置开关与最大字符数
- 新增证据包组装:合并 chunk、摘要、事实、时间线、故事等检索结果;支持空 query 时是否仍带 rolling 等开关
- repo/retriever/service/router/schemas/summarizer/timeline/extractor 等扩展;文档 memory-retrieval.md 更新

后端 - 对话 WS
- 增加 PING/PONG;分段 ASR 日志与空音频处理;转写失败与「无助手回复」错误提示更明确
- 助手多段回复持久化使用统一分隔符,与分段逻辑一致

后端 - Agent
- reply_limits:按 [SPLIT] 与段落拆段,并保证非空 fallback,供 WS 与 TTS 多段下发

后端 - 回忆录任务
- transcript ingest 记录 source_id;任务成功结?
This commit is contained in:
Kevin
2026-03-27 16:01:28 +08:00
parent 1374f6e8f5
commit e4bf0710c7
70 changed files with 3404 additions and 557 deletions

View File

@@ -90,7 +90,7 @@ class UserService:
confirmation: str,
object_storage: ObjectStorage | None = None,
) -> PurgeUserDataResponse:
"""物理删除该用户业务数据(不含 users 账号行);提交后再清 Redis / 任务追踪 / 锁 key"""
"""物理删除该用户业务数据(保留 users 行与登录字段);并清空出生年/出生地等档案字段;提交后再清 Redis 等"""
if confirmation != PURGE_USER_DATA_CONFIRMATION:
raise ValueError("确认文案不正确,请按提示完整输入口令")
@@ -98,16 +98,32 @@ class UserService:
if not user:
raise ValueError("用户不存在")
logger.info("用户数据清空开始 user_id={}", user_id)
storage_keys = await repo.collect_object_storage_keys_before_purge(
self._db, user_id
)
conv_ids, chapter_ids, story_ids = await repo.collect_purge_context(
self._db, user_id
)
logger.debug(
"清空前收集 user_id={} storage_keys={} conversations={} chapters={} stories={}",
user_id,
len(storage_keys),
len(conv_ids),
len(chapter_ids),
len(story_ids),
)
await repo.purge_user_related_rows(self._db, user_id)
await repo.clear_user_demographics(self._db, user_id)
await self._db.commit()
logger.info("用户数据 DB 行已删除、档案字段已清空并提交 user_id={}", user_id)
if object_storage and storage_keys:
logger.debug(
"对象存储尝试删除 user_id={} key_count={}", user_id, len(storage_keys)
)
for key in storage_keys:
try:
object_storage.delete(key)
@@ -115,6 +131,12 @@ class UserService:
logger.warning(
"对象存储删除失败 user_id={} key={} err={}", user_id, key, e
)
elif storage_keys and not object_storage:
logger.warning(
"用户数据清空:未注入 object_storage跳过 {} 个对象存储 key user_id={}",
len(storage_keys),
user_id,
)
for cid in conv_ids:
try:
@@ -123,9 +145,16 @@ class UserService:
logger.warning(
"清空会话 Redis 历史失败 conversation_id={} err={}", cid, e
)
if conv_ids:
logger.debug(
"已请求清空 Redis 会话历史 user_id={} conversation_count={}",
user_id,
len(conv_ids),
)
try:
await task_tracker.clear_user_tasks(user_id)
logger.debug("用户任务追踪已清空 user_id={}", user_id)
except Exception as e:
logger.warning("清空用户任务追踪失败 user_id={} err={}", user_id, e)
@@ -141,13 +170,22 @@ class UserService:
await redis_service.delete_keys_matching_pattern(
f"lock:story-image:{sid}"
)
logger.debug(
"Redis 分布式锁 key 已清理 user_id={} chapter_count={} story_count={}",
user_id,
len(chapter_ids),
len(story_ids),
)
except Exception as e:
logger.warning("清理 Redis 锁 key 失败 user_id={} err={}", user_id, e)
logger.info("用户数据清空完成 user_id={}", user_id)
return PurgeUserDataResponse(
success=True,
message=(
"已清空该账号下的对话、记忆、故事、章节、订单等业务数据,并已尝试删除关联的对象存储文件;"
"个人档案中的出生年份、出生地、成长地、职业等已清空;"
"所有登录会话已失效,请重新登录"
),
)