0

0

Python 记忆模块的向量存储 + 短期记忆结合

冰川箭仙

冰川箭仙

发布时间:2026-02-13 23:11:02

|

762人浏览过

|

来源于php中文网

原创

vectorstoreretrievermemory不适合短期记忆,因其高频读写开销大、易乱序;短期应使用conversationbuffermemory等内存结构,长期语义检索才用向量库,需分层协同与元数据优化。

python 记忆模块的向量存储 + 短期记忆结合

为什么 langchain.memory.VectorStoreRetrieverMemory 不能直接当短期记忆用

它压根不是为高频读写设计的——每次 save_context 都触发一次向量化 + 写入向量库,延迟高、开销大,还容易把对话历史搞乱序。真正做短期记忆(比如最近 5 轮对话)得靠纯内存结构,别碰向量存储。

常见错误现象:VectorStoreRetrieverMemory 在链式调用中反复 save/load,结果检索出不相关的旧对话片段,或者响应变慢到明显卡顿。

  • 只在需要「长期语义检索」时启用它,比如用户问“我上次说的 API key 是什么”,这时才查向量库
  • 短期上下文(当前会话轮次)必须用 ConversationBufferMemoryConversationSummaryMemory 单独管理
  • 两者要分层使用:短期记忆走内存,定期摘要后存进向量库做长期归档

怎么让 ConversationBufferMemory 和向量记忆协同工作

关键不是“合并”,而是“分工”:缓冲记忆管实时窗口,向量记忆管归档与召回。中间缺一层胶水逻辑——你得手动把缓冲区的内容定时抽出来,向量化后存进 vectorstore

实操建议:

立即学习Python免费学习笔记(深入)”;

  • 设置 k=5ConversationBufferMemory,只保留最新 5 条 input/output
  • 每完成 3 轮交互,用 memory.load_memory_variables({}) 拿到当前缓冲内容,拼成一段文本再喂给 vectorstore.add_texts
  • 向量检索时,别直接传原始 query,先用 ConversationSummaryMemory.predict_input 做意图压缩,避免关键词漂移

Chroma 本地向量库在记忆场景下的坑

默认用 Chroma(persist_directory=...) 看似省事,但实际运行中容易丢数据或加载空集合——尤其在 Jupyter 或 fastapi 多 worker 场景下,persist_directory 不是线程安全的。

FineVoice
FineVoice

FineVoice是一种AI数字语音解决方案,可以帮助用户增强声音,并配有实时变声器

下载

性能影响明显:每次 retriever.get_relevant_documents 都重新 mmap 文件,小模型尚可,换成 text-embedding-3-small 后首次查询延迟飙升到 800ms+。

  • 开发期用 Chroma(collection_name="memories", embedding_function=...) 显式指定 collection,别依赖默认名
  • 生产部署必须加 client_settings=Settings(anonymized_telemetry=False) 关掉遥测,否则启动时偷偷联网
  • 如果只是做 demo,直接用 InMemoryVectorStore 更稳,别硬上磁盘持久化

向量记忆里存什么字段最实用

光存 inputoutput 文本?召回效果差,因为缺少上下文锚点。真正有用的字段是带元数据的三元组:role(user/assistant)、timestamp(毫秒级)、session_id(非 UUID,用哈希短码)。

示例:

doc = Document(
    page_content="API key 是 sk-xxx",
    metadata={
        "role": "assistant",
        "timestamp": 1717023456123,
        "session_id": "a7f2e"
    }
)

这样检索时就能加过滤条件:retriever.invoke("API key", filter={"session_id": "a7f2e"}),避免跨会话污染。

容易被忽略的一点:timestamp 必须是数值型,字符串格式的日期(如 "2024-05-30")会导致 Chroma 过滤失效——它只支持 int/float/bool 类型的 metadata 过滤。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python FastAPI异步API开发_Python怎么用FastAPI构建异步API
Python FastAPI异步API开发_Python怎么用FastAPI构建异步API

Python FastAPI 异步开发利用 async/await 关键字,通过定义异步视图函数、使用异步数据库库 (如 databases)、异步 HTTP 客户端 (如 httpx),并结合后台任务队列(如 Celery)和异步依赖项,实现高效的 I/O 密集型 API,显著提升吞吐量和响应速度,尤其适用于处理数据库查询、网络请求等耗时操作,无需阻塞主线程。

27

2025.12.22

Python 微服务架构与 FastAPI 框架
Python 微服务架构与 FastAPI 框架

本专题系统讲解 Python 微服务架构设计与 FastAPI 框架应用,涵盖 FastAPI 的快速开发、路由与依赖注入、数据模型验证、API 文档自动生成、OAuth2 与 JWT 身份验证、异步支持、部署与扩展等。通过实际案例,帮助学习者掌握 使用 FastAPI 构建高效、可扩展的微服务应用,提高服务响应速度与系统可维护性。

156

2026.02.06

css中float用法
css中float用法

css中float属性允许元素脱离文档流并沿其父元素边缘排列,用于创建并排列、对齐文本图像、浮动菜单边栏和重叠元素。想了解更多float的相关内容,可以阅读本专题下面的文章。

587

2024.04.28

C++中int、float和double的区别
C++中int、float和double的区别

本专题整合了c++中int和double的区别,阅读专题下面的文章了解更多详细内容。

104

2025.10.23

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

530

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

214

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

1552

2023.10.24

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

640

2023.11.24

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

23

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.4万人学习

Django 教程
Django 教程

共28课时 | 4.2万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号