AWSWranglerPython库在读取具有布尔类型列的Parquet文件时会引发“未知编码类型异常。
创始人
2024-09-27 20:00:39
0

尝试使用pyarrow库而非fastparquet库来读取Parquet文件。以下是使用pyarrow库来读取Parquet文件的示例代码:

import awswrangler as wr
import pyarrow.parquet as pq

s3_path = "s3://my-bucket/my-file.parquet"
dataset = pq.ParquetDataset(s3_path, filesystem=wr.s3.get_fs())
table = dataset.read()

这将使用pyarrow库来读取Parquet文件并将数据加载到pyarrow表中,而无需使用AWS Wrangler库。

如果您需要使用AWS Wrangler库来读取Parquet文件,则可以尝试升级到最新版本以查看是否解决了该问题。您还可以尝试使用不同的数据类型来表示布尔值,例如使用整数(0或1)来表示布尔值,并在读取数据时将其转换为布尔类型。

import awswrangler as wr

s3_path = "s3://my-bucket/my-file.parquet"
df = wr.s3.read_parquet(s3_path, dataset=True, use_threads=True)
df["my_boolean_column"] = df["my_boolean_column"].astype(bool)

相关内容

热门资讯

最新技巧“wepoker透视真... 您好:wepoker透视真的假的这款游戏是可以开挂的,软件加【添加微信客服136704302】确实是...
我来教教你“wepoker透视... 您好:wepoker透视辅助挂有游戏亮点的软件,软件加客服确实是有挂的,很多玩家在这款游戏中打牌都会...
玩家必备教程“wepoker辅... >>您好:wepoker辅助软件怎么用确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特别...
最新技巧“微扑克辅助器案例”开... 您好,微扑克辅助器案例这款游戏可以开挂的,确实是有挂的,需要了解加微【136704302】很多玩家在...
分享认知“wpk有没有透视”开... 无需打开直接搜索;操作使用教程:分享认知“wpk有没有透视”开挂辅助挂(透视)解密教程1、界面简单,...
一起来讨论“wepoker可以... 一起来讨论“wepoker可以开挂透视吗”开挂辅助下载(透视)必赢方法是一款可以让一直输的玩家,快速...
科技通报“wpk开挂挂是真的吗... 无需打开直接搜索;操作使用教程:科技通报“wpk开挂挂是真的吗”开挂辅助脚本(透视)wpk教程1、界...
大家学习交流“wepoker私... >>您好:wepoker私人局怎么设置抽水确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌...
今日科普“怎么避免wpk透视挂... 您好,怎么避免wpk透视挂这款游戏可以开挂的,确实是有挂的,需要了解加微【136704302】很多玩...
实测分享“wepoker透视真... >>您好:wepoker透视真的吗软件加扣扣群确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户...