首页 游戏 软件 资讯 排行榜 专题
首页
手机教程
基于Python+Ollama DeepSeek与MySQL进行数据分析探索

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

热心网友
81
转载
2025-04-23
1、前言

在当今数据驱动的时代,数据分析已成为企业决策和业务优化的关键。deepseek 作为一款强大的数据分析工具,能够帮助我们快速从海量数据中提取有价值的信息。本文将详细介绍如何将 ollama+python+deepseek 与数据库结合,进行高效的数据分析。

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

2、环境准备

这里我自己使用的是Windows11操作系统,因此接下来全部以Windows11操作系统为例。

windows11,配置8vCPU,16GB内存,512G磁盘Mysql数据库,这里使用了MySQL5.7版本Python环境,这里使用的是Python 3.11执行器3、本地部署3.1、安装ollama首先,到ollama官网下载对应版本,windows操作系统需要windows10及以上的版本。下载完成后,直接点击安装即可。
基于Python+Ollama DeepSeek与MySQL进行数据分析探索

安装完成后,在终端窗口输入以下命令:

代码语言:bash复制
ollama -v
登录后复制

可以看到对应的ollama版本,即表示安装成功。

基于Python+Ollama DeepSeek与MySQL进行数据分析探索
3.2、部署deepseek-r1模型

在ollama官网,搜索我们要部署的模型,这里选择deepseek-r1模型,可以看到列出所有蒸馏版本,我们这里由于配置原因,选择1.5b版本。

立即学习“Python免费学习笔记(深入)”;

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

接着输入以下命令,进行拉取模型:

代码语言:bash复制
ollama pull deepseek-r1:1.5b# 当然也可以一部到位直接启动ollama run deepseek-r1:1.5b
登录后复制

显示success,即表示拉取成功。

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

拉取成功后,启动该模型:

代码语言:bash复制
ollama run deepseek-r1:1.5b
登录后复制

到此,已经启动成功:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

可以进行对话了:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索
4、Python接入本地模型

这里先给出Python这次所需要的一些依赖库,requirements.txt:

代码语言:bash复制
mysql-connector-python==8.1.0ollama==0.1.6python-dotenv==1.0.0
登录后复制

通过命令安装依赖库:

代码语言:bash复制
pip install -r requirements.txt
登录后复制4.1、示例代码

假设我们有一张表sale_orders的DDL如下:

代码语言:sql复制
CREATE TABLE `wxmapp`.`Untitled`  (  `id` int NOT NULL,  `name` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NULL DEFAULT NULL COMMENT '销售人员名称',  `order_name` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NULL DEFAULT NULL COMMENT '订单车型',  `sale_time` datetime NULL DEFAULT NULL COMMENT '销售日期',  `sale_count` int NULL DEFAULT NULL COMMENT '销售数量',  PRIMARY KEY (`id`) USING BTREE) ENGINE = InnoDB CHARACTER SET = utf8mb4 COLLATE = utf8mb4_0900_ai_ci ROW_FORMAT = Dynamic;
登录后复制

预生成的数据:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

接着,我们尝试让DeepSeek分析出销量最高的订单车型。以下是完整代码:

代码语言:python代码运行次数:0运行复制
import mysql.connectorimport ollama# 数据库连接配置(使用mysql.py中的配置)config = {    'user': 'xxx',    'password': 'xxx',    'host': 'xxx',    'database': 'xxx',    'raise_on_warnings': True,    'charset': 'utf8mb4'}# 连接数据库try:    conn = mysql.connector.connect(**config)    cursor = conn.cursor()    cursor.execute("SELECT order_name, sale_count FROM sale_orders")    rows = cursor.fetchall()    # 使用 DeepSeek 处理数据    result = ollama.generate(model='deepseek-r1:1.5b',                             prompt=f'有一张销售订单数据:{rows}。其中order_name表示订单车型名称,sale_count表示销售数量。现在请分析销量前三的订单车型。直接给出结果,不需要给出推理过程').get(        'response', '')    print(f"DeepSeek Analysis: {result}")except mysql.connector.Error as err:    print(f"Error: {err}")finally:    # 关闭连接    if conn.is_connected():        cursor.close()        conn.close()
登录后复制

运行后得到结果:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索
4.2、附加一些功能

上面是简单的DeepSeek进行数据分析的功能,对于数据量小的来说可能还行,但是对于数据量大的来说还是够呛。但是我们可以用他来进行一些数据结构的完整性检查、有效性检查以及给出一些合理的建议。

这里我添加了一些额外的功能,用于扫描库表是否包含了主键,是否字段长度过长没有约束,是否时间类型用了字符串等。

代码语言:python代码运行次数:0运行复制
# 连接数据库try:    conn = mysql.connector.connect(**config)    cursor = conn.cursor()    # 执行查询    # 获取索引信息    cursor.execute("SHOW INDEX FROM sale_orders")    indexes = cursor.fetchall()    print("\n索引信息:")    for index in indexes:        print(f"索引名称: {index[2]}, 类型: {'唯一索引' if index[1] == 0 else '普通索引'}, 字段: {index[4]}")    # 增强主键检测    cursor.execute("""        SELECT GROUP_CONCAT(DISTINCT COLUMN_NAME)         FROM INFORMATION_SCHEMA.KEY_COLUMN_USAGE         WHERE TABLE_NAME = 'sale_orders'         AND CONSTRAINT_NAME = 'PRIMARY'""")    pk_info = cursor.fetchall()    # 多层空值检查和类型验证    if pk_info and len(pk_info) > 0 and pk_info[0] and len(pk_info[0]) > 0:        primary_key = pk_info[0][0]        if isinstance(primary_key, str):            columns = primary_key.split(',')            columns_count = len(columns)            columns_str = primary_key        else:            columns_count = 0            columns_str = ''    else:        columns_count = 0        columns_str = ''    status_desc = (        f'复合主键({columns_count}个字段)' if columns_count > 1 else        '单字段主键' if columns_count == 1 else        '无主键'    )    print(f"\n主键有效性检查:{status_desc} ({columns_str})")    # 字段类型效率检查(扩展白名单机制)    cursor.execute("""        SELECT COLUMN_NAME, COLUMN_TYPE, DATA_TYPE         FROM INFORMATION_SCHEMA.COLUMNS         WHERE TABLE_NAME = 'sale_orders'         AND (DATA_TYPE IN ('text','blob')             OR COLUMN_TYPE LIKE '%varchar(255)%'             OR NUMERIC_SCALE IS NULL AND DATA_TYPE = 'decimal'            OR (COLUMN_NAME LIKE '%time%' AND DATA_TYPE NOT IN ('date','datetime','timestamp')))""")    inefficient_columns = cursor.fetchall()    print("\n低效字段检测:")    for col in inefficient_columns:        reason = 'TEXT/BLOB类型' if col[2] in ('text','blob') else \                '过度分配的VARCHAR' if 'varchar(255)' in col[1] else \                '不精确的DECIMAL类型' if col[2] == 'decimal' and NUMERIC_SCALE is None else \                '时间字段使用字符串类型' if 'time' in col[0].lower() and col[2] in ('varchar','text') else '未知类型'        print(f"字段 {col[0]}: {col[1]} ({reason})")    # 索引有效性评估    cursor.execute("SHOW INDEXES FROM sale_orders")    indexes = {}    for idx in cursor.fetchall():        if idx[2] not in indexes:            indexes[idx[2]] = {'columns': [], 'unique': idx[1]}        indexes[idx[2]]['columns'].append(idx[4])    print("\n索引有效性评估:")    for idx_name, meta in indexes.items():        coverage = '复合索引' if len(meta['columns'])>1 else '单字段索引'        score = '★'*(3 if meta['unique'] else 2 if len(meta['columns'])>1 else 1)        print(f"{idx_name}: {coverage}({','.join(meta['columns'])}) {score}星评级")    # 数据量统计    cursor.execute("SELECT COUNT(*) FROM sale_orders")    record_count = cursor.fetchone()[0]    print(f"\n数据量统计:{record_count}条记录{' (超过500万建议分表)' if record_count > 5000000 else ''}")    print("\n" + "="*40 + "\n")except mysql.connector.Error as err:    print(f"Error: {err}")finally:    # 关闭连接    if conn.is_connected():        cursor.close()        conn.close()
登录后复制

这里只是对单张表的检查:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

如果重新封装一下,可以对我们整个库进行扫描,以及对我们数据进行基本的分析:

基于Python+Ollama DeepSeek与MySQL进行数据分析探索

甚至给出了数据中访问量最高的分析,预测了主题趋势和兴趣点。

基于Python+Ollama DeepSeek与MySQL进行数据分析探索
4.3、其他的数据库

不仅支持MySQL数据库,同样支持主流的PostgreSQL和SQLite等。

4.3.1、PostgreSQL 示例代码语言:python代码运行次数:0运行复制
import psycopg2# 数据库连接配置conn = psycopg2.connect(    dbname="your_database",    user="your_username",    password="your_password",    host="your_host",    port="your_port")cursor = conn.cursor()cursor.execute("SELECT * FROM your_table")rows = cursor.fetchall()for row in rows:    print(row)cursor.close()conn.close()
登录后复制4.3.2、SQLite 示例代码语言:python代码运行次数:0运行复制
import sqlite3# 连接 SQLite 数据库conn = sqlite3.connect('your_database.db')cursor = conn.cursor()cursor.execute("SELECT * FROM your_table")rows = cursor.fetchall()for row in rows:    print(row)cursor.close()conn.close()
登录后复制5、总结

如今AI火热的年代,大模型+数据分析必然是个趋势。构建从数据提取,到智能分析,再到可视化呈现的全流程自动化,以及风险预测和识别也将成为另一个业务价值呈现点。

来源:https://www.php.cn/faq/1287652.html
免责声明: 游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

相关攻略

MySQL为何支持Socket连接?详解其优势与使用场景
科技数码
MySQL为何支持Socket连接?详解其优势与使用场景

Socket连接(准确说是Unix域套接字,Unix Domain Socket,UDS)是MySQL为本地进程间通信设计的专属连接方式,它并非网络协议,而是基于操作系统文件系统实现的进程通信机制。

热心网友
03.25
首次剖析代码Agent上下文检索机制:突破自动化开发瓶颈
AI
首次剖析代码Agent上下文检索机制:突破自动化开发瓶颈

新智元报道编辑:LRST【新智元导读】ContextBench首次从「过程」评测代码智能体,不再只看是否修好代码,而是追踪它是否精准找到并真正使用了关键代码片段,揭示了当前模型多读少用、被关键词误导

热心网友
03.07
MySQL索引两类全表扫描隐患的排查与优化策略
科技数码
MySQL索引两类全表扫描隐患的排查与优化策略

在之前的文章中,举了一个强制类型转换导致死锁的例子,有朋友询问是不是类型转换都不能命中索引,花1分钟细说一下。 《两个小公举,调试MySQL死锁必备!》中,举了一个强制类型转换导致死锁的例子,有朋友

热心网友
03.05
MySQL索引优化:五个高频实用技巧提升查询效率
科技数码
MySQL索引优化:五个高频实用技巧提升查询效率

MySQL 索引优化不用追求复杂,把以下五个基础技巧用熟,就能解决80%的索引问题。 MySQL索引优化是提升SQL查询效率的核心方法,用好索引能让慢查询“飞起来”,用不好反而会拖垮数据库。今天整理

热心网友
02.13
MySQL崩溃后启动缓慢?3个技巧提速InnoDB恢复
科技数码
MySQL崩溃后启动缓慢?3个技巧提速InnoDB恢复

今天和大家聊一个让无数 DBA 抓狂的问题:MySQL 异常宕机后,重启卡在 InnoDB。 今天想和大家聊一个让无数DBA抓狂的问题:MySQL异常宕机后,重启卡在“InnoDB: Startin

热心网友
02.12

最新APP

宝宝过生日
宝宝过生日
应用辅助 04-07
台球世界
台球世界
体育竞技 04-07
解绳子
解绳子
休闲益智 04-07
骑兵冲突
骑兵冲突
棋牌策略 04-07
三国真龙传
三国真龙传
角色扮演 04-07

热门推荐

美国SEC主席Paul Atkins证实:加密货币安全港提案已送交白宫审查
web3.0
美国SEC主席Paul Atkins证实:加密货币安全港提案已送交白宫审查

加密货币行业翘首以盼的监管里程碑,终于有了实质性进展。美国证券交易委员会(SEC)主席保罗·阿特金斯(Paul Atkins)近日证实,那份允许加密项目在早期获得注册豁免权的“安全港”框架提案,已经正式送抵白宫,进入了最终审查阶段。 在范德堡大学与区块链协会联合举办的数字资产峰会上,阿特金斯透露了这

热心网友
04.08
微策略Strategy报告:第一季录得144.6亿美元浮亏 再斥资约3.3亿美元买进4871枚比特币
web3.0
微策略Strategy报告:第一季录得144.6亿美元浮亏 再斥资约3.3亿美元买进4871枚比特币

微策略Strategy报告:第一季录得144 6亿美元浮亏 再斥资约3 3亿美元买进4871枚比特币 市场震荡的威力有多大?看看Strategy的最新季报就明白了。根据其最新向美国证管会(SEC)提交的8-K报告,受市场剧烈波动影响,这家公司所持的比特币在第一季度录得了一笔惊人的数字——144 6亿

热心网友
04.08
稳定币发行商Tether再扩Web3版图!Paolo Ardoino:正开发去中心化搜索引擎Hypersearch
web3.0
稳定币发行商Tether再扩Web3版图!Paolo Ardoino:正开发去中心化搜索引擎Hypersearch

稳定币巨头Tether的动向,向来是加密世界的风向标。这不,它向Web3基础设施的版图扩张,又迈出了关键一步。公司执行长Paolo Ardoino在社交平台X上透露,其工程团队正在全力“烹制”一个新项目——去中心化搜索引擎 “Hypersearch”。这个消息一出,立刻引发了行业的广泛猜想。 采用D

热心网友
04.08
Base链首个原生DeFi借贷协议Seamless Protocol倒闭 将于2026年6月30日下线
web3.0
Base链首个原生DeFi借贷协议Seamless Protocol倒闭 将于2026年6月30日下线

基地位于Coinbase旗下以太坊Layer2网络Base的Seamless Protocol,日前正式宣告了服务的终结。这个曾经吸引了超过20万用户的原生DeFi借贷协议,在运营不到三年后,终究没能跑赢时间。它主打的核心产品是Integrated Leverage Markets(ILMs)——一

热心网友
04.08
PAAL代币如何参与治理?社区投票能决定哪些事项?
web3.0
PAAL代币如何参与治理?社区投票能决定哪些事项?

PAAL代币揭秘:深度解析Web3社区治理的核心钥匙 在去中心化自治组织的浪潮中,谁真正掌握了项目的话语权?PAAL代币提供了一套系统化的答案。它不仅是生态内流转的价值媒介,更是开启链上治理大门的核心凭证。通过持有并质押PAAL代币,用户能够对协议升级、资金分配乃至战略方向等关键事务投出决定性的一票

热心网友
04.08