0

0

Deepseek大模型本地化安装部署

看不見的法師

看不見的法師

发布时间:2025-04-22 14:50:16

|

1154人浏览过

|

来源于php中文网

原创

以下是如何在本地部署基于 ollama 的 deepseek 模型的详细步骤。ollama 是一个用于在本地运行大型语言模型(llm)的工具,支持包括 deepseek 在内的多种模型。

Deepseek大模型本地化安装部署

一. 安装 Ollama

Ollama 支持 macOS 和 Linux 系统。以下是安装步骤:

Deepseek大模型本地化安装部署

macOS

  1. 打开终端。

  2. 运行以下命令安装 Ollama:

brew install ollama

或者下载文件(https://www.php.cn/link/bed6efa1f192db7c30ede96dbb9d76ee

Deepseek大模型本地化安装部署

Linux

  1. 打开终端。

  2. 运行以下命令安装 Ollama:

curl -fsSL https://ollama.com/install.sh | sh

Windows

Ollama 目前不支持原生 Windows,但可以通过 WSL(Windows Subsystem for Linux)在 Windows 上运行。安装 WSL 后,按照 Linux 的步骤操作。

二. 下载 DeepSeek 模型

Ollama 支持从 Hugging Face 或其他来源加载模型。以下是下载和加载 DeepSeek 模型的步骤:

Deepseek大模型本地化安装部署Deepseek大模型本地化安装部署

创想C2C多用户商城系统
创想C2C多用户商城系统

创想C2C商城系统,系统功能仿照淘宝设计,采用模块标签技术和静态html生成技术 基于Asp.Net/C#+SQL的开发的创想多用户商城系统,具有智能化、高扩展、稳定安全等特性,后台可自由添加频道,自由修改界面风格,商品无限级 分类,支持在线支付整合,通过安装和使用创想C2C商城系统,就可以轻松建立起专业大型的网上交易平台。创想C2C多用户商城系统5.6.3.8版本升级功能1.网站地区设置功能的增

下载
  1. 确保 Ollama 已安装并运行。

  2. 使用以下命令下载 DeepSeek 模型:

ollama pull deepseek-r1:1.5b

如果 DeepSeek 不在默认模型列表中,可以手动指定模型文件的路径或 URL。


  1. 运行 DeepSeek 模型

下载完成后,可以通过以下命令运行 DeepSeek 模型:

ollama run deepseek-r1:1.5b

运行后,Ollama 会启动一个交互式终端,您可以直接与 DeepSeek 模型对话。

Deepseek大模型本地化安装部署


四. 通过 API 调用 DeepSeek 模型

Ollama 提供了一个本地 API,可以通过 HTTP 请求与模型交互。

启动 API 服务

  1. 运行以下命令启动 Ollama 的 API 服务:
ollama serve

默认情况下,API 会在 http://localhost:11434 上运行。

发送请求

使用 curl 或编程语言(如 Python)发送请求。以下是一个示例:

curl http://localhost:11434/api/generate -d '{  "model": "deepseek",  "prompt": "你好,介绍一下你自己",  "stream": false}'

Python 示例:

import requests

url = "http://localhost:11434/api/generate"
data = {
    "model": "deepseek",
    "prompt": "你好,介绍一下你自己",
    "stream": False
}
response = requests.post(url, json=data)
print(response.json())

五. 优化性能

如果模型运行速度较慢,可以尝试以下优化方法:

  • 使用 GPU:确保系统安装了 CUDA 或 ROCm,并配置 Ollama 使用 GPU。
  • 量化模型:将模型量化为较低精度(如 8-bit 或 4-bit),以减少内存占用和提高速度。
  • 调整参数:降低 max_tokenstemperature 以减少计算量。

六. 常见问题

  • 模型无法下载
    • 检查网络连接,确保可以访问 Hugging Face 或模型源。
    • 手动下载模型文件并指定路径。
  • 性能不足
    • 确保硬件满足要求(如足够的内存和 GPU)。
    • 尝试量化模型或使用更小的模型变体。
  • API 无法访问
    • 检查 Ollama 服务是否正常运行。
    • 确保端口 11434 未被占用。

七. 图像化界面

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
curl_exec
curl_exec

curl_exec函数是PHP cURL函数列表中的一种,它的功能是执行一个cURL会话。给大家总结了一下php curl_exec函数的一些用法实例,这个函数应该在初始化一个cURL会话并且全部的选项都被设置后被调用。他的返回值成功时返回TRUE, 或者在失败时返回FALSE。

454

2023.06.14

linux常见下载安装工具
linux常见下载安装工具

linux常见下载安装工具有APT、YUM、DNF、Snapcraft、Flatpak、AppImage、Wget、Curl等。想了解更多linux常见下载安装工具相关内容,可以阅读本专题下面的文章。

183

2023.10.30

windows查看端口占用情况
windows查看端口占用情况

Windows端口可以认为是计算机与外界通讯交流的出入口。逻辑意义上的端口一般是指TCP/IP协议中的端口,端口号的范围从0到65535,比如用于浏览网页服务的80端口,用于FTP服务的21端口等等。怎么查看windows端口占用情况呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

1496

2023.07.26

查看端口占用情况windows
查看端口占用情况windows

端口占用是指与端口关联的软件占用端口而使得其他应用程序无法使用这些端口,端口占用问题是计算机系统编程领域的一个常见问题,端口占用的根本原因可能是操作系统的一些错误,服务器也可能会出现端口占用问题。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

1170

2023.07.27

windows照片无法显示
windows照片无法显示

当我们尝试打开一张图片时,可能会出现一个错误提示,提示说"Windows照片查看器无法显示此图片,因为计算机上的可用内存不足",本专题为大家提供windows照片无法显示相关的文章,帮助大家解决该问题。

835

2023.08.01

windows查看端口被占用的情况
windows查看端口被占用的情况

windows查看端口被占用的情况的方法:1、使用Windows自带的资源监视器;2、使用命令提示符查看端口信息;3、使用任务管理器查看占用端口的进程。本专题为大家提供windows查看端口被占用的情况的相关的文章、下载、课程内容,供大家免费下载体验。

463

2023.08.02

windows无法访问共享电脑
windows无法访问共享电脑

在现代社会中,共享电脑是办公室和家庭的重要组成部分。然而,有时我们可能会遇到Windows无法访问共享电脑的问题。这个问题可能会导致数据无法共享,影响工作和生活的正常进行。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2361

2023.08.08

windows自动更新
windows自动更新

Windows操作系统的自动更新功能可以确保系统及时获取最新的补丁和安全更新,以提高系统的稳定性和安全性。然而,有时候我们可能希望暂时或永久地关闭Windows的自动更新功能。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

874

2023.08.10

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 10.5万人学习

Git 教程
Git 教程

共21课时 | 4.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号