热门搜索:

数据分析 搜索结果

Python Pandas批量拆分与合并Excel文件实战

本文介绍如何利用Python Pandas库实现Excel文件的批量拆分与合并。首先演示如何将单个大型Excel按行数等分为多个子文件,并保存至指定目录;接着展示如何遍历文件夹读取多个小Excel,通过添加来源列并使用pd.concat进行合并,最终输出包含来源标记的完整大文件。

Python Pandas批量拆分与合并Excel文件实战

Python3 DataFrame缺失值的处理:判断、过滤、填充与删除

本文详细介绍Python3中Pandas库处理DataFrame缺失值(NaN/None)的四种核心方法。涵盖使用isnull和notnull进行判断,通过布尔索引过滤含缺失值数据,利用fillna方法按指定策略(如ffill/bfill)或数值填充,以及使用dropna按行或列删除缺失数据。文章包含具体参数说明与代码示例,帮助开发者高效完成数据清洗工作。

Python Pandas批量读写Excel多Sheet文件完整指南

本文详解如何利用Python的Pandas库高效处理包含多个Sheet的Excel文件。通过sheet_name=None参数一次性读取所有工作表,遍历字典对象进行数据清洗(如新增列),并使用ExcelWriter将处理后的多份数据批量写入新Excel文件的对应Sheet中,实现自动化数据处理流程。

Python Pandas批量读写Excel多Sheet文件完整指南

Pandas删除指定列指定值所在行的两种方法

本文介绍在Pandas中删除指定列包含特定值行的两种常用方法。首先讲解dropna函数处理缺失值的参数配置,随后详解drop函数通过index参数精准删除指定行的操作。结合实例演示如何统计、定位并移除“ZH_Term_len”列为0的数据,最后重置索引完成数据清洗。

Pandas删除指定列指定值所在行的两种方法

Python数据清洗:缺失值检测、删除与填充方法详解

本文详解Python中处理缺失值的完整流程。从导入数据、替换异常符号为NaN开始,利用isnull()统计缺失数量。重点讲解dropna()直接删除策略(含axis、how、thresh参数)与fillna()填充策略(均值/中位数/前后向填充),并引入sklearn的KNNImputer进行基于邻居的插补,提供完整代码示例。

Python数据清洗:缺失值检测、删除与填充方法详解

pandas解决excel科学计数法问题

本文介绍pandas处理Excel中超过14位数字自动转换为科学计数法的问题。提供两种解决方案:数据量小时使用to_csv替代to_excel;通用方法是在read_excel时指定dtype=str将所有数据读为字符串。此外,还讨论了将特定字段转为int类型时需先处理空值的注意事项,以避免转换错误。

Pandas DataFrame中inf值的处理与替换方法

本文介绍在Pandas DataFrame计算中产生inf(无穷大)值的原因及处理方法。通过Numpy库提供的isinf、isposinf等函数定位inf位置,并演示如何将Series或整个DataFrame中的正负无穷大替换为指定数值或NaN,以适配机器学习算法对数据完整性的要求。

Python 高效处理千万级数据写入 MySQL:Navicat、Pymysql 与 Pandas 方案对比

本文系统分享将千万级数据写入 MySQL 的两种场景及对应方案。针对非频繁写入,推荐使用 Navicat 导入向导;针对增量自动化写入,对比了 Pymysql 与 Pandas+SQLAlchemy 两种 Python 实现方式。测试显示,Pandas 方案仅需五行代码且耗时约 4 分钟,远优于 Pymysql 的 12 分 47 秒,且无需预先建表,推荐作为高效首选。

Python 高效处理千万级数据写入 MySQL:Navicat、Pymysql 与 Pandas 方案对比

专题列表