Python + Pandas : 轻松搞定CSV文件_python pandas csv

1. 概述

CSV（Comma-Separated Values，逗号分隔值）格式是一种广泛使用的数据存储格式，它以纯文本形式存储表格数据。在 CSV 文件中，通常使用逗号来分隔同一行内的各个字段，而不同的行则用换行符分隔。CSV 文件由于其简单性和易于读写的特点，在数据导出、数据交换以及许多类型的数据处理任务中被广泛应用。

尽管名为“逗号分隔”，但实际上 CSV 文件的字段分隔符也可以是其他字符，如制表符或分号。

由于其结构简单，CSV 文件可以被多种程序和服务所读取，比如文本编辑器、电子表格软件、数据库管理系统以及编程语言中的数据处理库。然而，处理大型或复杂的 CSV 文件仍然可能是一个挑战，尤其是当它们包含不规则的格式、缺失数据或特殊字符时。在这篇文章中，我们将探讨如何使用 Python 和 Pandas 库来有效地处理 CSV 文件，使这一过程变得简单而高效。

2. 安装

使用 pip 安装它：

pip install pandas
1

或从国内清华源安装：

pip install pandas -i https://pypi.tuna.tsinghua.edu.cn/simple
1

3. 示例 CSV 文件

假设我们有一个名为 “sales_data.csv” 的 CSV 文件，内容如下：

Date,Sales,Expenses
2024-01-01,2000,800
2024-01-02,1850,950
2024-01-03,2100,1000
2024-01-04,1500,700
2024-01-05,1950,850
1
2
3
4
5
6

这个简单的文件包含了一周内每天的销售和支出数据。

4. 读取 CSV 文件

首先，我们使用 Pandas 读取 CSV 文件：

import pandas as pd

df = pd.read_csv('sales_data.csv')
print(df)
1
2
3
4

输出结果：

         Date  Sales  Expenses
0  2024-01-01   2000       800
1  2024-01-02   1850       950
2  2024-01-03   2100      1000
3  2024-01-04   1500       700
4  2024-01-05   1950       850
1
2
3
4
5
6

5. 数据选择和过滤

假设我们只对销售额超过1900的数据感兴趣：

high_sales = df[df['Sales'] > 1900]
print(high_sales)
1
2

输出结果：

         Date  Sales  Expenses
0  2024-01-01   2000       800
2  2024-01-03   2100      1000
4  2024-01-05   1950       850
1
2
3
4

6. 缺失数据处理

如果我们的 CSV 文件中有缺失值，我们可以选择填充或删除它们。假设我们的 CSV 文件中有缺失值，我们可以这样处理：

# 假设df有缺失值
df_filled = df.fillna(0)
print(df_filled)
1
2
3

或者删除含缺失值的行：

df_dropped = df.dropna()
print(df_dropped)
1
2

7. 数据聚合和分组

我们可以对数据进行分组，例如计算每天的总收益（销售减去支出）：

df['Profit'] = df['Sales'] - df['Expenses']
daily_profit = df.groupby('Date')['Profit'].sum()
print(daily_profit)
1
2
3

输出结果：

Date
2024-01-01    1200
2024-01-02     900
2024-01-03    1100
2024-01-04     800
2024-01-05    1100
Name: Profit, dtype: int64
1
2
3
4
5
6
7

8. 数据导出

最后，我们可以将处理后的数据导出为一个新的 CSV 文件：

df.to_csv('processed_sales_data.csv', index=False)
1

9. 其他 Python 库

除了 Pandas，还有一些其他 Python 库也可以用于处理 CSV 文件：

1. CSV 库：Python 的标准库，适用于简单的 CSV 文件读写操作。
2. NumPy：适合进行数值运算的大型数据集。

10. 总结

在这篇文章中，我们详细探讨了如何使用 Python 和 Pandas 来处理 CSV 文件，从基础的读写操作到高级的数据处理技巧。无论你是数据科学的初学者，还是寻求提高工作效率的专业人士，Python 和 Pandas 都是处理 CSV 文件的理想选择。

---

以上就是“Python + Pandas : 轻松搞定CSV文件”的全部内容，希望对你有所帮助。
​
​关于Python技术储备

学好 Python 不论是就业还是做副业赚钱都不错，但要学会 Python 还是要有一个学习规划。最后大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！

一、Python所有方向的学习路线

Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。

二、Python必备开发工具

三、Python视频合集

观看零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

四、实战案例

光学理论是没用的，要学会跟着一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

五、Python练习题

检查学习结果。

六、面试资料

我们学习Python必然是为了找到高薪的工作，下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料，并且有阿里大佬给出了权威的解答，刷完这一套面试资料相信大家都能找到满意的工作。

最后祝大家天天进步！！

上面这份完整版的Python全套学习资料已经上传至CSDN官方，朋友如果需要可以直接微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】。