Python爬虫中自动创建文件夹的实现方法

Cora

发布时间：2026-10-13 | 5人浏览过

原创

本文介绍在Python爬虫开发中如何自动创建目标文件夹。通过os.path.exists判断路径存在性，若不存在则使用os.makedirs创建多级目录。同时补充了Python中处理文件名、后缀、目录分割及遍历重命名等常用文件操作技巧，帮助开发者更高效地管理爬虫数据存储。

该爬虫程序实现了自动创建文件夹的功能，具体逻辑如下：

#file setting
folder_path = "D:/spider_things/2016.4.6/" + file_name +"/"
if not os.path.exists(folder_path):
os.makedirs(folder_path)

上述代码片段的主要作用解释如下：

使用"os.path.exists(folder_path)"来检查folder_path指示的路径是否已经存在。如果该路径不存在，则调用os.makedirs(folder_path)”来创建相应的目录结构。

补充阅读：Python爬虫相关的文件及文件夹操作指南

0. 获取文件名、路径信息及文件拓展名

#取文件后缀
>>> os.path.splitext("/root/a.py")
('/root/a', '.py')
#取目录与文件名
>>> os.path.split("/root/a.py")
('/root', 'a.py')
>>> os.path.basename("/root/a.py")
'a.py'
>>> os.path.dirname('/root/a.py')
'/root'

1. 遍历文件夹内容并重命名文件

import os
import sys
path = 'D:/emojis'
# os.walk 返回的是一个三元组
for (path, dirs, files) in os.walk(path):
  for filename in files:
    newname = "emoji_" +filename
    os.rename(os.path.join(path, filename) , os.path.join(path, new_name))

总结

以上内容介绍了Python爬虫中自动创建文件夹的相关功能，希望能对大家有所帮助。如有任何疑问，欢迎留言，小编会及时回复。感谢大家对本站的支持！