0

0

DeepSeek与LangChain结合,构建复杂的AI应用教程

煙雲

煙雲

发布时间:2026-02-11 20:04:54

|

805人浏览过

|

来源于php中文网

原创

需完成模型接入、链式编排与组件协同配置:一、构造适配器使DeepSeek符合BaseLLM协议;二、构建工具调用Agent并约束JSON输出;三、用DeepSeekTokenizer优化RAG分块与检索;四、通过vLLM+FastAPI部署限流API;五、结合LangChainTracer与自定义回调实现日志与logits追踪。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

deepseek与langchain结合,构建复杂的ai应用教程

如果您希望将DeepSeek大语言模型与LangChain框架集成,以支持多步骤推理、外部工具调用或结构化数据处理等复杂AI应用,则需完成模型接入、链式编排与组件协同配置。以下是实现该集成的具体操作步骤:

一、配置DeepSeek模型为LangChain兼容的LLM实例

LangChain要求第三方大模型通过统一接口暴露invokegenerate方法。DeepSeek官方未提供原生LangChain封装,需手动构造适配器类,使其符合BaseLLM协议。

1、安装必要依赖:pip install langchain-core langchain-community transformers torch

2、使用transformers加载DeepSeek-V2或DeepSeek-Coder权重,设置trust_remote_code=True以启用自定义模型类。

3、继承langchain_core.language_models.base.BaseLLM,重写_call方法,在其中调用模型generate并返回纯文本响应。

4、在初始化时传入temperaturemax_new_tokens等参数,并确保stop序列能被正确识别和截断。

二、构建支持工具调用的Agent工作流

LangChain的AgentExecutor可协调LLM决策与外部函数执行。DeepSeek模型需输出符合JSON格式的工具调用指令,因此必须启用其结构化输出能力并约束响应模式。

1、使用DeepSeekTokenizer对提示词进行预处理,插入标记。

2、在系统提示中明确指定输出格式为{"action": "tool_name", "action_input": {"arg1": "value1"}},并禁止自由发挥。

3、配置Tool对象时,将每个函数包装为StructuredTool,确保输入参数类型与描述被LangChain自动解析。

4、将适配后的DeepSeek LLM与create_tool_calling_agent结合,生成AgentExecutor实例。

三、集成向量存储实现RAG增强推理

RAG流程依赖检索结果注入上下文,而DeepSeek对长上下文敏感,需控制总token数并优化chunk匹配精度。LangChain的RetrievalQA链需适配其分词器特性。

1、使用deepseek-ai/deepseek-coder-6.7b-base对应的DeepSeekTokenizer初始化RecursiveCharacterTextSplitter,按代码符号切分而非空格。

2、将文档嵌入前,先通过tokenizer.encode统计长度,确保单个chunk不超过2048 token,避免截断关键逻辑。

PHP与MySQL程序设计3
PHP与MySQL程序设计3

本书是全面讲述PHP与MySQL的经典之作,书中不但全面介绍了两种技术的核心特性,还讲解了如何高效地结合这两种技术构建健壮的数据驱动的应用程序。本书涵盖了两种技术新版本中出现的最新特性,书中大量实际的示例和深入的分析均来自于作者在这方面多年的专业经验,可用于解决开发者在实际中所面临的各种挑战。 本书内容全面深入,适合各层次PHP和MySQL开发人员阅读,既是优秀的学习教程,也可用作参考手册。

下载

3、选用Chroma作为向量库,配置embedding_functionHuggingFaceEmbeddings,模型选择BAAI/bge-small-zh-v1.5以匹配中文语义。

4、构造RetrievalQA时,将prompt模板中的{context}字段替换为retriever.get_relevant_documents(query)返回的文本拼接结果,并限制最多3条。

四、部署为可调用API服务

将LangChain链封装为HTTP端点后,需确保DeepSeek模型在推理时内存占用可控、响应延迟稳定,且不因并发请求引发CUDA out of memory错误。

1、使用vLLM启动DeepSeek服务,命令中指定--tensor-parallel-size 2--gpu-memory-utilization 0.9以提升吞吐。

2、在LangChain中通过RemoteRunnable连接vLLM的/generate接口,设置model_name参数为部署时注册的模型别名。

3、用FastAPI编写路由,接收JSON请求体,提取input字段传入chain.invoke,并捕获torch.cuda.OutOfMemoryError异常。

4、对每个请求添加semaphore限流,最大并发数设为min(4, GPU显存总量 // 8GB),防止OOM。

五、调试与日志追踪集成

LangChain内置LangChainTracer可记录每步调用细节,但DeepSeek的内部attention权重与logits需额外导出,以便分析幻觉或逻辑断裂点。

1、在适配器类的_call方法内,调用model.generate(..., output_logits=True),并将logits保存至线程局部变量。

2、配置LangChainTracer指向本地langsmith实例,设置环境变量LANGCHAIN_TRACING_V2=trueLANGCHAIN_ENDPOINT=http://localhost:1984

3、在AgentExecutor初始化时传入callbacks=[LangChainTracer(), CustomLogCallback()],后者负责提取并序列化logits张量。

4、日志中所有涉及tool_inputtool_output的字段,均需用json.dumps(..., ensure_ascii=False)处理,避免中文乱码。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
2026春节习俗大全
2026春节习俗大全

本专题整合了2026春节习俗大全,阅读专题下面的文章了解更多详细内容。

68

2026.02.11

Yandex网页版官方入口使用指南_国际版与俄罗斯版访问方法解析
Yandex网页版官方入口使用指南_国际版与俄罗斯版访问方法解析

本专题全面整理了Yandex搜索引擎的官方入口信息,涵盖国际版与俄罗斯版官网访问方式、网页版直达入口及免登录使用说明,帮助用户快速、安全地进入Yandex官网,高效使用其搜索与相关服务。

200

2026.02.11

虫虫漫画网页版入口与免费阅读指南_正版漫画全集在线查看方法
虫虫漫画网页版入口与免费阅读指南_正版漫画全集在线查看方法

本专题系统整理了虫虫漫画官网及网页版最新入口,涵盖免登录观看、正版漫画全集在线阅读方式,并汇总稳定可用的访问渠道,帮助用户快速找到虫虫漫画官方页面,轻松在线阅读各类热门漫画内容。

40

2026.02.11

Docker容器化部署与DevOps实践
Docker容器化部署与DevOps实践

本专题面向后端与运维开发者,系统讲解 Docker 容器化技术在实际项目中的应用。内容涵盖 Docker 镜像构建、容器运行机制、Docker Compose 多服务编排,以及在 DevOps 流程中的持续集成与持续部署实践。通过真实场景演示,帮助开发者实现应用的快速部署、环境一致性与运维自动化。

4

2026.02.11

Rust异步编程与Tokio运行时实战
Rust异步编程与Tokio运行时实战

本专题聚焦 Rust 语言的异步编程模型,深入讲解 async/await 机制与 Tokio 运行时的核心原理。内容包括异步任务调度、Future 执行模型、并发安全、网络 IO 编程以及高并发场景下的性能优化。通过实战示例,帮助开发者使用 Rust 构建高性能、低延迟的后端服务与网络应用。

1

2026.02.11

Spring Boot企业级开发与MyBatis Plus实战
Spring Boot企业级开发与MyBatis Plus实战

本专题面向 Java 后端开发者,系统讲解如何基于 Spring Boot 与 MyBatis Plus 构建高效、规范的企业级应用。内容涵盖项目架构设计、数据访问层封装、通用 CRUD 实现、分页与条件查询、代码生成器以及常见性能优化方案。通过完整实战案例,帮助开发者提升后端开发效率,减少重复代码,快速交付稳定可维护的业务系统。

6

2026.02.11

包子漫画网页版入口与全集阅读指南_正版免费漫画快速访问方法
包子漫画网页版入口与全集阅读指南_正版免费漫画快速访问方法

本专题汇总了包子漫画官网和网页版入口,提供最新章节抢先看方法、正版免费阅读指南,以及稳定访问方式,帮助用户快速直达包子漫画页面,无广告畅享全集漫画内容。

159

2026.02.10

MC.JS网页版快速畅玩指南_MC.JS官网在线入口及免安装体验方法
MC.JS网页版快速畅玩指南_MC.JS官网在线入口及免安装体验方法

本专题汇总了MC.JS官网入口和网页版快速畅玩方法,提供免安装访问、不同版本(1.8.8、1.12.8)在线体验指南,以及正版网页端操作说明,帮助玩家轻松进入MC.JS世界,实现即时畅玩与高效体验。

89

2026.02.10

谷歌邮箱网页版登录与注册全指南_Gmail账号快速访问与安全操作教程
谷歌邮箱网页版登录与注册全指南_Gmail账号快速访问与安全操作教程

本专题汇总了谷歌邮箱网页版的最新登录入口和注册方法,详细提供官方账号快速访问方式、网页版操作教程及安全登录技巧,帮助用户轻松管理Gmail邮箱账户,实现高效、安全的邮箱使用体验。

78

2026.02.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
10分钟--Midjourney创作自己的漫画
10分钟--Midjourney创作自己的漫画

共1课时 | 0.1万人学习

Midjourney 关键词系列整合
Midjourney 关键词系列整合

共13课时 | 0.9万人学习

AI绘画教程
AI绘画教程

共2课时 | 0.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号