AWSWranglerPython库在读取具有布尔类型列的Parquet文件时会引发“未知编码类型异常。
创始人
2024-09-27 20:00:39
0

尝试使用pyarrow库而非fastparquet库来读取Parquet文件。以下是使用pyarrow库来读取Parquet文件的示例代码:

import awswrangler as wr
import pyarrow.parquet as pq

s3_path = "s3://my-bucket/my-file.parquet"
dataset = pq.ParquetDataset(s3_path, filesystem=wr.s3.get_fs())
table = dataset.read()

这将使用pyarrow库来读取Parquet文件并将数据加载到pyarrow表中,而无需使用AWS Wrangler库。

如果您需要使用AWS Wrangler库来读取Parquet文件,则可以尝试升级到最新版本以查看是否解决了该问题。您还可以尝试使用不同的数据类型来表示布尔值,例如使用整数(0或1)来表示布尔值,并在读取数据时将其转换为布尔类型。

import awswrangler as wr

s3_path = "s3://my-bucket/my-file.parquet"
df = wr.s3.read_parquet(s3_path, dataset=True, use_threads=True)
df["my_boolean_column"] = df["my_boolean_column"].astype(bool)

相关内容

热门资讯

德州透视hhpoker!uup... 德州透视hhpoker!uupoker透视(透视)攻略-确实曝光真的有挂1、玩家可以在德州透视hhp...
wepoker正确养号方法!哈... wepoker正确养号方法!哈糖大菠萝怎么挂(透视)器-竟然专业真的是有挂1、上手简单,内置详细流程...
智星德州插件2024最新版!w... 智星德州插件2024最新版!wepoker破解器(透视)技巧-确实详细是真的挂;1、智星德州插件20...
wepoker网页版透视方法!... wepoker网页版透视方法!We poker辅助器下载(透视)脚本-真是推荐存在有挂wepoker...
wepoker透视方法!哈糖大... wepoker透视方法!哈糖大菠萝软件下载(透视)app-竟然必备是真的挂1、哈糖大菠萝软件下载公共...
约局吧开挂神器是真的吗!wep... 约局吧开挂神器是真的吗!wepoker免费透视脚本(透视)攻略-确实揭露真的是有挂1、每一步都需要思...
hhpoker有透视的吗!we... hhpoker有透视的吗!wejoker辅助脚本(透视)方法-确实必备真的是有挂1、操作简单,无需h...
wepoker有没有挂!hhp... wepoker有没有挂!hhpoker德州牛仔视频(透视)软件-切实揭幕真的有挂1、许多玩家不知道h...
epoker有透视吗!wpk德... epoker有透视吗!wpk德州局透视(透视)神器-总是普及真的有挂1、操作简单,无需epoker有...
德州私人局怎么透视!pokem... 德州私人局怎么透视!pokemmo脚本(透视)器-其实详情是有挂1、不需要AI权限,帮助你快速的进行...