Python批量执行SQL文件:自动化修改多数据库实战
本文介绍如何利用Python和pymysql库批量执行SQL文件以修改多个数据库。通过连接数据库、遍历所有库、删除指定表后重新导入SQL脚本,实现自动化批量操作。文章详细解析了代码逻辑,包括处理编码问题、分割SQL语句及异常捕获,旨在提升数据库维护效率,减少重复劳动。
前言
在前一篇文章中,我们讨论了如何批量修改文件。有时,我们也需要对数据库进行批量修改。以往的做法是使用宝塔面板中的phpMyAdmin导出一个已修改好的SQL文件,然后依次在其他数据库中导入。这种做法效率极低,甚至可以说非常低,且涉及大量重复性劳动。因此,我决定使用Python来批量执行SQL文件,以提高工作效率。
环境
- 版本:Python3.6
- 系统:MacOS
- IDE:PyCharm
- 第三方库:pymysql
Show Code
import pymysql
host = 'xxx.65.9.191'
username = 'root'
password = 'root'
def connectMySQL():
print('开始连接数据库')
# 打开数据库连接
db = pymysql.connect(host,username,password,charset='utf8')
# 使用 cursor() 方法创建一个游标对象 cursor
cursor = db.cursor()
# 使用 execute() 显示所有数据库
cursor.execute("SHOW DATABASES")
print('开始查询所有数据库')
# 获取所有数据库名称
data = cursor.fetchall()
# 开始操作
for dbb in data:
dbname = dbb[0]
print('选中' + dbname + '数据库')
# 选择数据库
cursor.execute("use " + dbname)
# 查看有哪些表
cursor.execute("show tables")
table = cursor.fetchall()
# 如果不是3个表的就不管
if len(table) != 3:
continue
for tb in table:
tbname = tb[0]
print('开始删除'+tbname+'表')
# 删除所有的表
cursor.execute("DROP TABLE " + tbname)
executeScriptsFromFile('1.sql', cursor)
db.close()
def executeScriptsFromFile(filename,cursor):
fd = open(filename, 'r',encoding='utf-8')
sqlFile = fd.read()
fd.close()
sqlCommands = sqlFile.split(';')
for command in sqlCommands:
try:
cursor.execute(command)
except Exception as msg:
print(msg)
print('sql执行完成')
if __name__ == "__main__":
connectMySQL()
解释代码
这是用于执行sql文件,这里第一句就有个坑,最好设置encoding='utf-8'否则可能会报错UnicodeEncodeError: 'latin-1' codec can't encode characters in position 41-44: ordinal not in range(256),当读取了sql文件后用;分割语句然后用for循环依次执行sql语句
def executeScriptsFromFile(filename,cursor):
fd = open(filename, 'r',encoding='utf-8')
sqlFile = fd.read()
fd.close()
sqlCommands = sqlFile.split(';')
for command in sqlCommands:
try:
cursor.execute(command)
except Exception as msg:
print(msg)
print('sql执行完成')
这一段比较容易理解了,首先是连接数据库,注意还是最好设置一下charset='utf8' ,因为我要操作多个数据库执行sql文件,所以先把数据库名称全部获取出来,这里获取出来的结果是元组类型,即使for循环后出来的也是一个元组,所以用[0]取出元组中的值,然后选中数据库执行删表操作(当然不是每个人都要按我这些操作哈,需要执行啥操作就自己改SQL语句),表删完了,然后开始执行1.sql文件,执行完成后关闭数据库
def connectMySQL():
print('开始连接数据库')
# 打开数据库连接
db = pymysql.connect(host,username,password,charset='utf8')
# 使用 cursor() 方法创建一个游标对象 cursor
cursor = db.cursor()
# 使用 execute() 显示所有数据库
cursor.execute("SHOW DATABASES")
print('开始查询所有数据库')
# 获取所有数据库名称
data = cursor.fetchall()
# 开始操作
for dbb in data:
dbname = dbb[0]
print('选中' + dbname + '数据库')
# 选择数据库
cursor.execute("use " + dbname)
# 查看有哪些表
cursor.execute("show tables")
table = cursor.fetchall()
# 如果不是3个表的就不管
if len(table) != 3:
continue
for tb in table:
tbname = tb[0]
print('开始删除'+tbname+'表')
# 删除所有的表
cursor.execute("DROP TABLE " + tbname)
executeScriptsFromFile('1.sql', cursor)
db.close()
这2篇文章的代码从思路、编写、到测试,用了一下午吧!我对Python也不是很熟悉,所以中间也踩了些坑,但确实能看出来,Python作为胶水语言拿来做这些小工具真的舒服!
总结
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对本站的支持。
本站声明
本文内容仅供参考,不代表本站观点。转载或引用请注明出处。如发现内容问题,请通过联系我们页面反馈。













