Athena并行卸载到同一位置。
创始人
2024-09-21 13:00:47
0次

要使Athena并行卸载到同一位置，需要在查询中指定输出表的位置，并且在拆分的第一层level上使用PARTITION BY关键字。例如：

CREATE EXTERNAL TABLE my_table(
  column1 INT,
  column2 STRING
)
PARTITIONED BY (dt STRING)
LOCATION 's3://my-bucket/my_folder';

INSERT OVERWRITE TABLE my_table
PARTITION(dt='2022-01-01')
SELECT column1, column2
FROM source_table
WHERE dt = '2022-01-01'
DISTRIBUTE BY RAND();

上述代码将source_table中2022年1月1日的数据随机分配到多个Athena实例进行处理，并将结果存储在s3://my-bucket/my_folder/dt=2022-01-01/下的my_table表中。

需要注意的是，Athena会自动为每个分区创建一个文件夹，因此不需要在代码中单独创建文件夹。

上一篇：Athena表中的数据与S3文件不同

下一篇：Athena不支持带有时区的时间戳？

相关内容

热门资讯

wepoke辅助挂！德扑之星系... wepoke辅助挂！德扑之星系统有哪里规律，微扑克ai机器人，安装教程（有挂详情）（1）wepoke...
wpk透视辅助工具！wpk发牌... wpk透视辅助工具！wpk发牌规律，菠萝德州app挂哪里买，黑科技教程（有挂教程）是一款可以让一直输...
wepower有外挂！wopo... wepower有外挂！wopoker系统套路，来玩app有挂，透明教程（有挂教学）1）wepower...
aapoker猫腻！好运大菠萝... aapoker猫腻！好运大菠萝有辅助吗，wepoke辅助真的，AA德州教程（有挂了解）是一款可以让一...
德州之星有辅助挂！wpk数据手... 德州之星有辅助挂！wpk数据手机软件叫啥，德州wepower透视辅助，详细教程（有挂详情）您好，德州...
wepoke辅助挂！aapok... wepoke辅助挂！aapoke辅助工具存在吗，微扑克有挂，可靠教程（有挂详情）1、超多福利：超高返...
微扑克辅助挂！微扑克有挂，wp... 一、微扑克辅助挂简介了解软件请加微：136704302微扑克辅助挂是一款在线扑克游戏平台，玩家可以在...
wpk俱乐部！德州线上扑克辅助... wpk俱乐部！德州线上扑克辅助工具app，德扑牌型胜率，技巧教程（有挂方法）1、在wpk俱乐部ai机...
aapoker透视辅助！微扑克... aapoker透视辅助！微扑克辅助机器人，德州ai能盈利，教你攻略（有挂攻略）；人气非常高，ai更新...
wpk透视辅助工具！gg扑克发... wpk透视辅助工具！gg扑克发牌问题，wepoke软件透明挂，wpk教程（有挂技巧）是一款可以让一直...