0

0

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

蓮花仙者

蓮花仙者

发布时间:2025-04-23 16:42:13

|

1095人浏览过

|

来源于php中文网

原创

1、前言

在当今数据驱动的时代,数据分析已成为企业决策和业务优化的关键。deepseek 作为一款强大的数据分析工具,能够帮助我们快速从海量数据中提取有价值的信息。本文将详细介绍如何将 ollama+python+deepseek 与数据库结合,进行高效的数据分析。

2、环境准备

这里我自己使用的是Windows11操作系统,因此接下来全部以Windows11操作系统为例。

windows11,配置8vCPU,16GB内存,512G磁盘Mysql数据库,这里使用了MySQL5.7版本Python环境,这里使用的是Python 3.11执行器3、本地部署3.1、安装ollama首先,到ollama官网下载对应版本,windows操作系统需要windows10及以上的版本。下载完成后,直接点击安装即可。
基于Python+Ollama DeepSeek与MySQL进行数据分析探索

安装完成后,在终端窗口输入以下命令:

代码语言:bash复制
ollama -v

可以看到对应的ollama版本,即表示安装成功。

基于Python+Ollama DeepSeek与MySQL进行数据分析探索
3.2、部署deepseek-r1模型

在ollama官网,搜索我们要部署的模型,这里选择deepseek-r1模型,可以看到列出所有蒸馏版本,我们这里由于配置原因,选择1.5b版本。

立即学习Python免费学习笔记(深入)”;

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

接着输入以下命令,进行拉取模型:

代码语言:bash复制
ollama pull deepseek-r1:1.5b# 当然也可以一部到位直接启动ollama run deepseek-r1:1.5b

显示success,即表示拉取成功。

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

拉取成功后,启动该模型:

代码语言:bash复制
ollama run deepseek-r1:1.5b

到此,已经启动成功:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

可以进行对话了:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索
4、Python接入本地模型

这里先给出Python这次所需要的一些依赖库,requirements.txt:

代码语言:bash复制
mysql-connector-python==8.1.0ollama==0.1.6python-dotenv==1.0.0

通过命令安装依赖库:

Magician
Magician

Figma插件,AI生成图标、图片和UX文案

下载
代码语言:bash复制
pip install -r requirements.txt
4.1、示例代码

假设我们有一张表sale_orders的DDL如下:

代码语言:sql复制
CREATE TABLE `wxmapp`.`Untitled`  (  `id` int NOT NULL,  `name` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NULL DEFAULT NULL COMMENT '销售人员名称',  `order_name` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NULL DEFAULT NULL COMMENT '订单车型',  `sale_time` datetime NULL DEFAULT NULL COMMENT '销售日期',  `sale_count` int NULL DEFAULT NULL COMMENT '销售数量',  PRIMARY KEY (`id`) USING BTREE) ENGINE = InnoDB CHARACTER SET = utf8mb4 COLLATE = utf8mb4_0900_ai_ci ROW_FORMAT = Dynamic;

预生成的数据:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

接着,我们尝试让DeepSeek分析出销量最高的订单车型。以下是完整代码:

代码语言:python代码运行次数:0运行复制
import mysql.connectorimport ollama# 数据库连接配置(使用mysql.py中的配置)config = {    'user': 'xxx',    'password': 'xxx',    'host': 'xxx',    'database': 'xxx',    'raise_on_warnings': True,    'charset': 'utf8mb4'}# 连接数据库try:    conn = mysql.connector.connect(**config)    cursor = conn.cursor()    cursor.execute("SELECT order_name, sale_count FROM sale_orders")    rows = cursor.fetchall()    # 使用 DeepSeek 处理数据    result = ollama.generate(model='deepseek-r1:1.5b',                             prompt=f'有一张销售订单数据:{rows}。其中order_name表示订单车型名称,sale_count表示销售数量。现在请分析销量前三的订单车型。直接给出结果,不需要给出推理过程').get(        'response', '')    print(f"DeepSeek Analysis: {result}")except mysql.connector.Error as err:    print(f"Error: {err}")finally:    # 关闭连接    if conn.is_connected():        cursor.close()        conn.close()

运行后得到结果:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索
4.2、附加一些功能

上面是简单的DeepSeek进行数据分析的功能,对于数据量小的来说可能还行,但是对于数据量大的来说还是够呛。但是我们可以用他来进行一些数据结构的完整性检查、有效性检查以及给出一些合理的建议。

这里我添加了一些额外的功能,用于扫描库表是否包含了主键,是否字段长度过长没有约束,是否时间类型用了字符串等。

代码语言:python代码运行次数:0运行复制
# 连接数据库try:    conn = mysql.connector.connect(**config)    cursor = conn.cursor()    # 执行查询    # 获取索引信息    cursor.execute("SHOW INDEX FROM sale_orders")    indexes = cursor.fetchall()    print("\n索引信息:")    for index in indexes:        print(f"索引名称: {index[2]}, 类型: {'唯一索引' if index[1] == 0 else '普通索引'}, 字段: {index[4]}")    # 增强主键检测    cursor.execute("""        SELECT GROUP_CONCAT(DISTINCT COLUMN_NAME)         FROM INFORMATION_SCHEMA.KEY_COLUMN_USAGE         WHERE TABLE_NAME = 'sale_orders'         AND CONSTRAINT_NAME = 'PRIMARY'""")    pk_info = cursor.fetchall()    # 多层空值检查和类型验证    if pk_info and len(pk_info) > 0 and pk_info[0] and len(pk_info[0]) > 0:        primary_key = pk_info[0][0]        if isinstance(primary_key, str):            columns = primary_key.split(',')            columns_count = len(columns)            columns_str = primary_key        else:            columns_count = 0            columns_str = ''    else:        columns_count = 0        columns_str = ''    status_desc = (        f'复合主键({columns_count}个字段)' if columns_count > 1 else        '单字段主键' if columns_count == 1 else        '无主键'    )    print(f"\n主键有效性检查:{status_desc} ({columns_str})")    # 字段类型效率检查(扩展白名单机制)    cursor.execute("""        SELECT COLUMN_NAME, COLUMN_TYPE, DATA_TYPE         FROM INFORMATION_SCHEMA.COLUMNS         WHERE TABLE_NAME = 'sale_orders'         AND (DATA_TYPE IN ('text','blob')             OR COLUMN_TYPE LIKE '%varchar(255)%'             OR NUMERIC_SCALE IS NULL AND DATA_TYPE = 'decimal'            OR (COLUMN_NAME LIKE '%time%' AND DATA_TYPE NOT IN ('date','datetime','timestamp')))""")    inefficient_columns = cursor.fetchall()    print("\n低效字段检测:")    for col in inefficient_columns:        reason = 'TEXT/BLOB类型' if col[2] in ('text','blob') else \                '过度分配的VARCHAR' if 'varchar(255)' in col[1] else \                '不精确的DECIMAL类型' if col[2] == 'decimal' and NUMERIC_SCALE is None else \                '时间字段使用字符串类型' if 'time' in col[0].lower() and col[2] in ('varchar','text') else '未知类型'        print(f"字段 {col[0]}: {col[1]} ({reason})")    # 索引有效性评估    cursor.execute("SHOW INDEXES FROM sale_orders")    indexes = {}    for idx in cursor.fetchall():        if idx[2] not in indexes:            indexes[idx[2]] = {'columns': [], 'unique': idx[1]}        indexes[idx[2]]['columns'].append(idx[4])    print("\n索引有效性评估:")    for idx_name, meta in indexes.items():        coverage = '复合索引' if len(meta['columns'])>1 else '单字段索引'        score = '★'*(3 if meta['unique'] else 2 if len(meta['columns'])>1 else 1)        print(f"{idx_name}: {coverage}({','.join(meta['columns'])}) {score}星评级")    # 数据量统计    cursor.execute("SELECT COUNT(*) FROM sale_orders")    record_count = cursor.fetchone()[0]    print(f"\n数据量统计:{record_count}条记录{' (超过500万建议分表)' if record_count > 5000000 else ''}")    print("\n" + "="*40 + "\n")except mysql.connector.Error as err:    print(f"Error: {err}")finally:    # 关闭连接    if conn.is_connected():        cursor.close()        conn.close()

这里只是对单张表的检查:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

如果重新封装一下,可以对我们整个库进行扫描,以及对我们数据进行基本的分析:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

甚至给出了数据中访问量最高的分析,预测了主题趋势和兴趣点。

基于Python+Ollama DeepSeek与MySQL进行数据分析探索
4.3、其他的数据库

不仅支持MySQL数据库,同样支持主流的PostgreSQL和SQLite等。

4.3.1、PostgreSQL 示例代码语言:python代码运行次数:0运行复制
import psycopg2# 数据库连接配置conn = psycopg2.connect(    dbname="your_database",    user="your_username",    password="your_password",    host="your_host",    port="your_port")cursor = conn.cursor()cursor.execute("SELECT * FROM your_table")rows = cursor.fetchall()for row in rows:    print(row)cursor.close()conn.close()
4.3.2、SQLite 示例代码语言:python代码运行次数:0运行复制
import sqlite3# 连接 SQLite 数据库conn = sqlite3.connect('your_database.db')cursor = conn.cursor()cursor.execute("SELECT * FROM your_table")rows = cursor.fetchall()for row in rows:    print(row)cursor.close()conn.close()
5、总结

如今AI火热的年代,大模型+数据分析必然是个趋势。构建从数据提取,到智能分析,再到可视化呈现的全流程自动化,以及风险预测和识别也将成为另一个业务价值呈现点。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

751

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

636

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

758

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

618

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1262

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

547

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

577

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

706

2023.08.11

Java 桌面应用开发(JavaFX 实战)
Java 桌面应用开发(JavaFX 实战)

本专题系统讲解 Java 在桌面应用开发领域的实战应用,重点围绕 JavaFX 框架,涵盖界面布局、控件使用、事件处理、FXML、样式美化(CSS)、多线程与UI响应优化,以及桌面应用的打包与发布。通过完整示例项目,帮助学习者掌握 使用 Java 构建现代化、跨平台桌面应用程序的核心能力。

36

2026.01.14

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
CSS3 教程
CSS3 教程

共18课时 | 4.5万人学习

PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.1万人学习

Git 教程
Git 教程

共21课时 | 2.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号