python读parquet文件 pandas读parquet文件

安装

# 安装 pandas and pyarrow:
pip3 install pandas pyarrow

读取

# 使用 read_parquet 加载parquet文件
import pandas as pd
from pandas import read_parquet
data = read_parquet("myFile.parquet.gzip")
print(data.count())
data.head()