2025年pymysql连接池实现(pymysql连接数据库一段时间失效)

pymysql连接池实现(pymysql连接数据库一段时间失效)我们在 python 中使用 scapy 爬取数据后想要将数据存储到虚拟机的 mysql 数据库中 可以在 scrapy 项目中的 settings py 文件中设置对应的数据库参数 但是我们在做好一切工作后依然会遇到报错 例如 2004 time out 注 本解决方案用到的虚拟机版本为 CentOs7 DB HOST 192 168

大家好,我是讯享网,很高兴认识大家。



我们在python中使用scapy爬取数据后想要将数据存储到虚拟机的mysql数据库中,可以在scrapy项目中的settings.py文件中设置对应的数据库参数,但是我们在做好一切工作后依然会遇到报错,例如 2004 time out

注:本解决方案用到的虚拟机版本为CentOs7

DB_HOST = '192.168.131.128'
DB_PORT = 3306

# USER要填数据库中赋予了远程连接的用户名
DB_USER = 'root'
# PASSWORD也是被允许远程连接的用户的密码
DB_PASSWORD = 'Hgy!'
DB_NAME = 'spider01'
DB_CHARSET = 'utf8'

注意: 极易犯错!!!很多人在创建虚拟机mysql的初始用户时并没有赋予其远程连接的权限 在第一步中的 DB_USER 填入无远程连接权限的初始用户会报错 2004 time out ,默认情况下,root用户是不允许远程登录的,只允许在MySQL所在的Linux服务器登陆MySQL系统

2.1mysql8.0配置root运行远程登录

# 第一次设置root远程登录,并配置远程密码使用如下SQL命令


讯享网

create user ‘root’@‘%’ IDENTIFIED WITH mysql_native_password BY ‘密码’;

# 密码需要符合:大于8位,有大写字母,有特殊符号,不能是连续的简单语句如123,abc

2.2mysql5.7配置root运行远程登录

grant all privileges on . to root@“IP地址” identified by ‘密码’ with grant option;

# IP地址即允许登陆的IP地址,也可以填写%,表示允许任何地址
# 密码表示给远程登录独立设置密码,和本地登陆的密码可以不同

flush privileges;
# 刷新权限,生效

确保用户 ‘root’ 具有足够的权限来访问数据库 ‘spider01’
否则报错 1044, “Access denied for user ‘root’@‘%’ to database ‘spider01’”
这个错误意味着 MySQL 拒绝了用户 ‘root’@‘%’ 对数据库 ‘spider01’ 的访问,因为该用户在尝试访问该数据库时没有足够的权限。

GRANT ALL PRIVILEGES ON spider01.* TO ‘root’@‘%’;
FLUSH PRIVILEGES;
#这将为用户 ‘root’ 授予对数据库 ‘spider01’ 的完全权限,并刷新权限以使更改生效。

否则报错 1045, “Access denied for user ‘root’@‘192.168.131.1’ (using password: YES)”     

这个错误一般表示两点:

4.1检查防火墙和网络设置: 确保 MySQL 服务器所在的主机可以从 Scrapy 所在的主机访问,并且防火墙或网络设置没有阻止连接

A.直接关闭防火墙

systemctl stop firewalld
systemctl disable firewalld

 B.开放端口3306

firewall-cmd –state
# 检查当前防火墙的状态以及是否启用了防火墙
firewall-cmd –zone=public –add-port=3306/tcp –permanent
# 如果防火墙启用,需要允许 MySQL 端口(默认为 3306)的传入连接
firewall-cmd –reload
# 应用新的防火墙规则

4.2检查用户名和密码: 确保您在 Scrapy 中配置的 MySQL 连接信息中的用户名和密码是正确的,并且具有足够的权限来访问指定的数据库。

小讯
上一篇 2025-06-07 08:24
下一篇 2025-05-15 18:54

相关推荐

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容,请联系我们,一经查实,本站将立刻删除。
如需转载请保留出处:https://51itzy.com/kjqy/174676.html