首页 游戏 软件 资讯 排行榜 专题
首页
数据库
如何解决Python爬虫入库时的SQL注入隐患_使用SQLAlchemy参数映射

如何解决Python爬虫入库时的SQL注入隐患_使用SQLAlchemy参数映射

热心网友
78
转载
2026-04-24

如何解决Python爬虫入库时的SQL注入隐患:使用SQLAlchemy参数映射

SQLAlchemy的text()配合:param参数映射之所以安全,是因为数据库驱动会将参数值作为纯数据传入,完全不参与SQL语法解析,从而避免了结构篡改;而错误地使用f-string进行拼接,则会直接导致注入漏洞。

如何解决Python爬虫入库时的SQL注入隐患_使用SQLAlchemy参数映射

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

SQLAlchemy的text() + :param参数映射为什么比字符串拼接安全

关键在于一个核心机制:数据库驱动会把:param后面的值,完完全全当作纯数据来处理,它根本不参与SQL语法的解析过程。这意味着,即便用户输入的是"admin' --"或者更具破坏性的"1; DROP TABLE users; --",到了数据库那里,这些内容也仅仅被视为一个普通的字符串值,而不会对查询的结构产生任何影响。

这里有个常见的误区,就是误用了f-string%格式化来拼接text()的内容,这相当于亲手打开了安全漏洞的大门:

  • ❌ 错误写法:text(f"SELECT * FROM users WHERE name = '{name}'")
  • ✅ 正确写法:text("SELECT * FROM users WHERE name = :name"),然后通过.execute(..., {"name": name})来传递参数。

什么时候必须用text()而不是ORM原生查询

当你需要动态控制SQL语句的结构本身时,text()就派上用场了。比如,用户想要指定排序的字段、动态选择分组维度,或者联合查询多个不确定的表——这些场景下,ORM原生的filter_by()order_by()往往就力不从心了。

但必须划清一条安全边界:text()只对「值」参数化是安全的,对「标识符」(如表名、列名、函数名)则不安全。所以,务必区分清楚:

立即学习“Python免费学习笔记(深入)”;

  • 允许用户决定WHERE status = :status中的:status值 → 安全,因为这是值。
  • 允许用户决定ORDER BY :sort_col中的:sort_col → 不安全!这会被当成字符串字面量,而不是列名。
  • 如果确实需要动态列名,唯一的办法是进行白名单校验:if sort_col not in ["created_at", "score", "name"]: → 直接抛出异常。

session.execute()connection.execute()在参数绑定上的关键区别

两者都支持text()配合命名参数,但它们在生命周期和事务控制上有所不同:

  • session.execute()会自动绑定到当前Session的事务中,适合与ORM对象混合操作,比如查询完数据后再进行add()
  • connection.execute()则绕过了Session,层级更底层,适合执行批量原始SQL或需要跨事务边界操作的任务。
  • 无论选择哪一种,参数都必须统一格式:要么用字典(命名参数),要么用元组(位置参数),不能混用。例如,execute(stmt, {"id": 123})是合法的;而execute(stmt, [123])只有在SQL中使用位置占位符%s时才合法。

另外,别忘了不同数据库驱动的差异:PostgreSQL用%s,SQLite用?。但好消息是,使用SQLAlchemy的text()并统一采用:name这种命名占位符,框架会自动帮你翻译,这才是推荐的做法。

爬虫入库时最易忽略的“非值”注入点:表名、字段名、INSERT的列列表

爬虫项目里,常常会根据数据来源(比如不同的站点或频道)分表存储,例如news_sinanews_ifeng。如果直接用用户输入或URL路径片段来拼接表名,就等于给系统开了一个后门。

解决之道,不是简单地“加个转义”,而是要彻底剥离外部输入对SQL结构的控制权:

  • 用配置映射代替自由输入:建立source_map = {"sina": "news_sina", "ifeng": "news_ifeng"}这样的映射关系,然后通过source_map.get(user_source)来获取安全的表名。
  • INSERT语句中的列名列表(例如INSERT INTO t (title, url, pub_time))也不能来自爬虫动态获取的字段名,必须硬编码或者从预定义的schema中读取。
  • 即使字段值是从JSON数据中解析出来的,也要检查键名是否在白名单内:allowed_keys = {"title", "url", "content"},对于像__table_name__这类可疑的键名,必须果断丢弃。

话说回来,真正难以防范的,其实从来不是' OR 1=1这种经典攻击,而是开发者自己不小心把__import__eval这类危险逻辑塞进了SQL生成环节——这虽然严格来说不算SQL注入,但其危害性往往更大。

来源:https://www.php.cn/faq/2338977.html
免责声明: 游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

相关攻略

如何解决Python爬虫入库时的SQL注入隐患_使用SQLAlchemy参数映射
数据库
如何解决Python爬虫入库时的SQL注入隐患_使用SQLAlchemy参数映射

如何解决Python爬虫入库时的SQL注入隐患:使用SQLAlchemy参数映射 SQLAlchemy的text()配合:param参数映射之所以安全,是因为数据库驱动会将参数值作为纯数据传入,完全不参与SQL语法解析,从而避免了结构篡改;而错误地使用f-string进行拼接,则会直接导致注入漏洞。

热心网友
04.24
如何在 Dash Tabs 中优雅展示 Python 脚本文件
前端开发
如何在 Dash Tabs 中优雅展示 Python 脚本文件

本文提供在 Dash 应用中通过 Tabs 组件分页展示多个 Python 源码文件的完整解决方案,有效解决代码换行丢失、语法高亮缺失、可读性差等常见问题,推荐使用 html Code + html Pre 原生组合或 dash_mantine_components Code 组件实现专业级代码渲染

热心网友
04.23
RPA和Python哪个更好用
业界动态
RPA和Python哪个更好用

随着数字化转型的加速,RPA(机器人流程自动化)和Python成为了各行各业的重要工具。然而,对于很多人来说,选择RPA还是Python是一个难题。本文将从性能、可定制性、可扩展性等方面对两者进行比较,以帮助您做出决策。 一、性能 说起性能,得先看它们各自擅长做什么。RPA的核心能力,在于搞定那些基

热心网友
04.23
Python字符串的‘ ’,“ ”,''' '''
编程语言
Python字符串的‘ ’,“ ”,''' '''

Python字符串定义全解析:单引号、双引号与三引号的正确用法 在Python编程中,字符串是用于表示文本数据的基本数据类型,它本质上是一个由字符组成的序列。要创建一个字符串,我们需要使用特定的引号将字符内容“包裹”起来。本文将系统讲解Python中单引号(‘ ’)、双引号(“ ”)以及三引号(

热心网友
04.23
Python获取本机所有网卡IP/MAC地址的三种方法
编程语言
Python获取本机所有网卡IP/MAC地址的三种方法

Python获取本机所有网卡IP MAC地址的三种方法 在Windows、Linux、MacOS三大主流操作系统上,如何用Python精准获取所有网络适配器的信息?今天要聊的这三种方案,完美适配多网卡场景,不仅能拿到IP和MAC地址,连网卡名称、子网掩码这些细节也一并搞定。代码都是开箱即用的,直接复

热心网友
04.23

最新APP

宝宝过生日
宝宝过生日
应用辅助 04-07
台球世界
台球世界
体育竞技 04-07
解绳子
解绳子
休闲益智 04-07
骑兵冲突
骑兵冲突
棋牌策略 04-07
三国真龙传
三国真龙传
角色扮演 04-07

热门推荐

Ubuntu环境下如何调试Golang打包过程
编程语言
Ubuntu环境下如何调试Golang打包过程

在Ubuntu环境下调试Golang打包过程 在Ubuntu上折腾Go项目的打包和调试,是不少开发者都会经历的环节。这个过程其实并不复杂,只要按部就班,就能把问题理清楚。下面这几个步骤,算是经验之谈,能帮你快速定位和解决打包过程中的常见问题。 1 确保已安装Go环境 第一步,也是最基础的一步:确认

热心网友
04.24
Node.js在Linux系统中如何实现数据备份与恢复
编程语言
Node.js在Linux系统中如何实现数据备份与恢复

Node js 在 Linux 的数据备份与恢复实践 一 备份范围与策略 在动手之前,得先想清楚要保护什么。一个典型的 Node js 应用,需要备份的对象通常包括这几块: 明确备份对象:首先是应用代码与核心配置,它们通常位于类似 var www my_node_app 的目录下。别漏了依赖清单

热心网友
04.24
Golang在Ubuntu打包时如何排除文件
编程语言
Golang在Ubuntu打包时如何排除文件

Golang在Ubuntu打包时如何排除文件 在Golang项目里, gitignore文件大家都很熟悉,它负责在版本控制时过滤掉不需要的文件。但如果你遇到的问题是:在编译打包阶段,如何精准地排除某些源代码文件呢?这时候, gitignore就无能为力了。解决这个问题的关键,在于用好Go语言提供的“

热心网友
04.24
Ubuntu下Golang打包工具怎么选
编程语言
Ubuntu下Golang打包工具怎么选

在 Ubuntu 上为 Go 项目选择打包工具 为 Go 项目选择打包工具,这事儿说简单也简单,说复杂也复杂。关键得看你的交付目标是什么——是生成一个本机二进制文件就够,还是需要面向多平台发行、打包成容器镜像,甚至是制作成标准的 deb 系统包?同时,你的交付流程也至关重要,是本地手工操作,还是集

热心网友
04.24
Node.js在Linux环境下如何进行性能测试
编程语言
Node.js在Linux环境下如何进行性能测试

Node js 在 Linux 环境下的性能测试与瓶颈定位 一、测试流程与准备 性能测试不是一场盲目的冲锋,而是一次精密的实验。一切始于清晰的目标和稳定的环境。 明确目标与指标:首先,得把目标量化。是要求P95延迟稳定在200毫秒以内,还是错误率必须低于0 5%?把这些数字定下来。紧接着,锁定测试环

热心网友
04.24