这个屌丝很懒，什么也没留下！

python读parquet文件 pandas读parquet文件_python parquet

作者：Gausst松鼠会 | 2024-05-01 00:12:33

python parquet

如何使用gzip压缩后的parquet文件

今天我们来学习使用python读取parquet文件

背景

有一个parquet文件，而且还用gzip压缩了。

那该如何读取呢？

pandas和pyarrow


# 安装 pandas and pyarrow:
pip3 install pandas pyarrow


# 使用 read_parquet 加载parquet文件
import pandas as pd
from pandas import read_parquet
data = read_parquet("myFile.parquet.gzip")
print(data.count())
data.head()

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/Gausst松鼠会/article/detail/515959

python读parquet文件 pandas读parquet文件_python parquet

背景

那该如何读取呢？

准备工作

读取