AWSGlue抓取器在排除模式条件内添加分区
创始人
2024-09-25 18:02:00
0次
  1. 确定排除模式条件，例如，要排除名为“excluded_partition”的分区：

exclude_patterns=['excluded_partition']

  1. 在Glue抓取器的参数中指定排除模式条件：

args = { '--recurse': True, '--exclude-patterns': ','.join(exclude_patterns) }

  1. 定义抓取器并使用参数运行抓取器：

import boto3 from botocore.exceptions import ClientError

glue_client = boto3.client('glue')

crawler_name = 'example_crawler'

try: response = glue_client.start_crawler( Name=crawler_name, Arguments=args ) print(f"Starting crawler '{crawler_name}'") except ClientError as e: print(f"Failed to start crawler '{crawler_name}': {e}")

上一篇：AWSGlue中自定义转换中的输出模式中为什么无法看到摄取时间列？

下一篇：AWSGlue自定义分类器和分区创建

相关内容

热门资讯

1分钟了解！德扑之星比赛创建设... 1分钟了解！德扑之星比赛创建设置，微扑克辅助器ios，爆料教程（从前是有挂）1、超多福利：超高返利，...
透视代打！aapoker辅助插... 透视代打！aapoker辅助插件工具下载，决战十水三辅助，插件教程（有挂技巧）；支持多人共享记分板与...
玩家必备教程！wpk俱乐部盈利... 玩家必备教程！wpk俱乐部盈利模式，微扑克德州专用辅助器，辅助教程（最初存在有挂）1、微扑克德州专用...
透视好牌！德普之星透视辅助软件... 1、透视好牌！德普之星透视辅助软件下载，wepoker辅助软件视频，安装教程（有挂透明）。2、wep...
如何分辨真伪！约局吧辅牌器，a... 您好，aapoker挂这款游戏可以开挂的，确实是有挂的，需要了解加微【136704302】很多玩家在...
透视代打！德普之星透视辅助软件... 透视代打！德普之星透视辅助软件是真的吗，奇迹陕西游戏辅助，微扑克教程（有挂方法）；致您一封信；亲爱奇...
每日必看教程！we poke有... 每日必看教程！we poke有挂吗，智星德州菠萝，介绍教程（果然是真的有挂）1、智星德州菠萝ai机器...
透视免费！智星德州辅助译码插件... 1、透视免费！智星德州辅助译码插件靠谱吗，约局吧可以看到别人的底牌，2025新版教程（有挂透明）（U...
2分钟细说！aa扑克平台，we... 2分钟细说！aa扑克平台，we辅助poker德之星，黑科技教程（原本有挂）；致您一封信；亲爱we辅助...
透视智能ai！aapoker透... 透视智能ai！aapoker透视插件下载，雀姬辅助脚本，必备教程（有挂技巧）关于雀姬辅助脚本机制的，...