AWSWranglerPython库在读取具有布尔类型列的Parquet文件时会引发“未知编码类型异常。
创始人
2024-09-27 20:00:39
0

尝试使用pyarrow库而非fastparquet库来读取Parquet文件。以下是使用pyarrow库来读取Parquet文件的示例代码:

import awswrangler as wr
import pyarrow.parquet as pq

s3_path = "s3://my-bucket/my-file.parquet"
dataset = pq.ParquetDataset(s3_path, filesystem=wr.s3.get_fs())
table = dataset.read()

这将使用pyarrow库来读取Parquet文件并将数据加载到pyarrow表中,而无需使用AWS Wrangler库。

如果您需要使用AWS Wrangler库来读取Parquet文件,则可以尝试升级到最新版本以查看是否解决了该问题。您还可以尝试使用不同的数据类型来表示布尔值,例如使用整数(0或1)来表示布尔值,并在读取数据时将其转换为布尔类型。

import awswrangler as wr

s3_path = "s3://my-bucket/my-file.parquet"
df = wr.s3.read_parquet(s3_path, dataset=True, use_threads=True)
df["my_boolean_column"] = df["my_boolean_column"].astype(bool)

相关内容

热门资讯

实测透视"wepok... >>您好:wepoker好友局能不能透视确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特...
推荐透视"wepok... >>>您好:,软件加微信【添加136704302】确实是有挂的,很多玩家在这款游戏中打牌都会发现很多...
发现透视"we po... >>您好:we poker透视软件加扣扣群确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌...
了解透视"wepok... 您好:wepoker有辅助吗这款游戏可以开挂的,确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用...
了解透视"wepok... >>您好:wepoker好牌率确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特别好,总是...
教会透视"wepok... 教会透视"wepoker开挂辅助挂教程"开挂(透视)辅助下载(玩家必备教程详细教程)是一款可以让一直...
曝光透视"wepok... 无需打开直接搜索;操作使用教程:曝光透视"wepoker到底有透视软件吗"开挂(透视)辅助神器(终于...
了解透视"wepok... wepoker辅助器教程是一款可以让一直输的玩家,快速成为一个“必胜”的ai辅助神器,有需要的用户可...
必看透视"wepok... wepoker开挂透视是一款可以让一直输的玩家,快速成为一个“必胜”的ai辅助神器,有需要的用户可以...
分享透视"wepok... 您好:wepoker辅助器教程这款游戏是可以开挂的,软件加【添加微信客服136704302】确实是有...