不合法的Parquet文件:AWSGlue目录表不支持Snappy文件。
创始人
2024-12-24 19:01:05
0

在AWS Glue Catalog表中使用Snappy文件可能引发错误。解决此问题的一种方法是将文件压缩为Gzip格式。以下是示例代码:

import boto3
import botocore

s3 = boto3.resource('s3')

def convert_snappy_to_gzip(bucket_name, key):
    try:
        object = s3.Object(bucket_name, key)
        content = object.get()['Body'].read()
        new_key = key[:-7] + ".gzip"
        s3.Object(bucket_name, new_key).put(Body=content, ContentEncoding='gzip')
        object.delete()
    except botocore.exceptions.ClientError as e:
        print(e)

此代码将指定的Snappy文件转换为Gzip格式并将其存储在相同的S3 bucket中。后续的AWS Glue Catalog表中可以使用这个新的Gzip文件。

相关内容

热门资讯

二分钟了解!微乐麻将专用挂,酉... 二分钟了解!微乐麻将专用挂,酉阳蛮籽麻将有没有挂,教你攻略(有挂解说);酉阳蛮籽麻将有没有挂辅助器中...
7分钟了解!新玉海楼茶苑怎么开... 7分钟了解!新玉海楼茶苑怎么开挂,八闽十三水辅助,专业教程(有挂方法)1、完成新玉海楼茶苑怎么开挂透...
1分钟了解!上品长乐十三水辅助... 1分钟了解!上品长乐十三水辅助器,欢乐斗地主有挂吗,攻略教程(有挂技巧)1、在上品长乐十三水辅助器a...
2分钟了解!陕西微乐麻将助赢神... 2分钟了解!陕西微乐麻将助赢神器,潮汕暗宝真的能看穿吗,透明挂教程(有挂神器)1、上手简单,内置详细...
8分钟了解!风风字牌辅助软件,... 8分钟了解!风风字牌辅助软件,桂麻圈有外挂吗,微扑克教程(有挂技巧);1、上手简单,内置详细流程视频...
5分钟了解!天天爱麻将胡牌器,... 5分钟了解!天天爱麻将胡牌器,中至万年麻将辅牌器是真的吗,曝光教程(有挂详情);1、玩家可以在中至万...
4分钟了解!中至赣州麻将输赢规... 4分钟了解!中至赣州麻将输赢规律,斗棋有外挂真实案例,透视教程(有挂插件);在进入中至赣州麻将输赢规...
1分钟了解!花城牌舍系统规律,... 1分钟了解!花城牌舍系统规律,新科乐棋牌怎么加脚本,wpk教程(有挂教学)1、不需要AI权限,帮助你...
三分钟了解!七彩全民雀神辅助器... 三分钟了解!七彩全民雀神辅助器下载安装,牌乐门有人吗,2025版教程(有挂神器)七彩全民雀神辅助器下...
一分钟了解!微信天天斗地主修改... 一分钟了解!微信天天斗地主修改器,多乐跑得快第三方辅助器,必备教程(有挂解说)多乐跑得快第三方辅助器...