Python中按行遍历与readlines读取文件的速度差异分析
本文通过实例对比Python中两种常见的文件读取方式:逐行迭代读取与readlines一次性读取。测试结果显示,逐行遍历虽然内存占用低,但耗时较长;而使用readlines将内容一次性加载至列表后处理,在速度上具有明显优势。文章提供了具体的代码实现及性能差异说明,帮助开发者根据实际需求选择高效的文件读取策略。
第一种方式是逐行读取文件,这种方式虽然节省内存,但处理速度相对较慢,耗时较多。具体实现如代码片段所示:首先打开名为'inputFile.txt'的文件进行读取,然后遍历文件对象。在循环中,对每一行获取到的路径字符串执行rstrip()方法去除末尾空白字符。
srcFiles = open('inputFile.txt', 'r')
for file_path in srcFiles:
file_path = file_path.rstrip()
第二种方式是快速读取所有行,该方法通过readlines()函数一次性将文件内容加载到内存列表中,从而显著提升读取速度。如代码片段所示:使用with语句打开'inputFile.txt'文件,调用fRead.readlines()将txt中所有字符串读入列表srcPaths。随后使用random.shuffle(srcPaths)打乱列表顺序,最后遍历处理每个图像路径,同样对每行执行rstrip()去除空白。
with open('inputFile.txt', 'r') as fRead:
srcPaths = fRead.readlines() #txt中所有字符串读入list列表srcPaths
random.shuffle(srcPaths) #打乱list顺序
for img_path in srcPaths:
img_path = img_path.rstrip()
以上关于Python不同方式读取文件速度的实例分享完毕,希望能为读者提供参考。欢迎大家继续支持本站,获取更多技术内容。
本站声明
本文内容仅供参考,不代表本站观点。转载或引用请注明出处。如发现内容问题,请通过联系我们页面反馈。













