AWSWranglerS3读取Parquet并写入DynamoDB-不支持numpy.ndarray类型。
创始人
2024-09-27 20:00:41
0

AWS Wrangler 不支持将 numpy.ndarray 类型直接写入 DynamoDB,需要将其转换为支持的数据类型。可以通过在代码中使用 astype() 方法将 numpy.ndarray 类型转换为支持的数据类型,例如将 numpy.float64 转换为 Python float。示例代码如下:

import boto3
import awswrangler as wr
import pandas as pd
import numpy as np

session = boto3.Session()
s3 = session.client('s3')
dynamodb = session.resource('dynamodb')

df = pd.read_parquet('s3://my-bucket/my-prefix/my-file.parquet')
df['my_array_column'] = df['my_array_column'].astype(np.float64) # 转换为 float 类型
items = wr.pandas.df_to_dict(df)

table = dynamodb.Table('my-table')
with table.batch_writer() as batch:
    for item in items:
        batch.put_item(Item=item)

这段代码从 S3 中读取 Parquet 文件,使用 pandas 将其转换为 DataFrame,并使用 astype() 方法将 numpy.ndarray 类型转换为 float 类型。然后,通过将 DataFrame 转换为字典,使用 AWS Wrangler 将其写入 DynamoDB 表中。

相关内容

热门资讯

终于懂了“微扑克封号如何避免”... >>>您好:,软件加微信【添加136704302】确实是有挂的,很多玩家在这款游戏中打牌都会发现很多...
重大通报“wpk正版透视”开挂... 无需打开直接搜索加微信客服(136704302)咨询了解wpk正版透视辅助器目前(微信:136704...
科技新动态“wpk账号胜利太低... 科技新动态“wpk账号胜利太低”开挂辅助工具(透视)科技教程是一款可以让一直输的玩家,快速成为一个“...
2分钟细说“wepoker开挂... >>您好:wepoker开挂辅助方法确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的牌特别好...
盘点几款“wpk辅助挂”开挂辅... 盘点几款“wpk辅助挂”开挂辅助器(透视)力荐教程是一款可以让一直输的玩家,快速成为一个“必胜”的a...
热点推荐“wepoker能不能... wepoker能不能开挂是一款可以让一直输的玩家,快速成为一个“必胜”的ai辅助神器,有需要的用户可...
最新技巧“wepokerpus... 无需打开直接搜索;操作使用教程:最新技巧“wepokerpus透视挂是真的假的”开挂辅助软件(透视)...
科技介绍“wepoker透视软... wepoker透视软件挂教程是一款可以让一直输的玩家,快速成为一个“必胜”的ai辅助神器,有需要的用...
终于清楚“wePoKer有透视... >>您好:wePoKer有透视软件吗软件加扣扣群确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用...
科技通报“wepoker能不能... >>>您好:,软件加微信【添加136704302】确实是有挂的,很多玩家在这款游戏中打牌都会发现很多...