AWSGlue抓取器在排除模式条件内添加分区
创始人
2024-09-25 18:02:00
0次
  1. 确定排除模式条件，例如，要排除名为“excluded_partition”的分区：

exclude_patterns=['excluded_partition']

  1. 在Glue抓取器的参数中指定排除模式条件：

args = { '--recurse': True, '--exclude-patterns': ','.join(exclude_patterns) }

  1. 定义抓取器并使用参数运行抓取器：

import boto3 from botocore.exceptions import ClientError

glue_client = boto3.client('glue')

crawler_name = 'example_crawler'

try: response = glue_client.start_crawler( Name=crawler_name, Arguments=args ) print(f"Starting crawler '{crawler_name}'") except ClientError as e: print(f"Failed to start crawler '{crawler_name}': {e}")

上一篇：AWSGlue中自定义转换中的输出模式中为什么无法看到摄取时间列？

下一篇：AWSGlue自定义分类器和分区创建

相关内容

热门资讯

关于！微信微乐自建房辅助工具，... 关于！微信微乐自建房辅助工具，微乐家乡麻将自建房辅助app（开挂自建房）方法1）微乐家乡麻将自建房辅...
大家学习交流！微信卡五星辅助器... 大家学习交流！微信卡五星辅助器，微乐小程序免费黑科技（开挂自建房）方法1、很好的工具软件，可以解锁游...
三分钟了解！微乐微信自建房辅助... 三分钟了解！微乐微信自建房辅助工具插件，微乐家乡麻将自建房辅助app（开挂自建房）工具1、三分钟了解...
一分钟教会你！微乐家乡麻将自建... 一分钟教会你！微乐家乡麻将自建房辅助app，微乐自建房脚本免费入口（开挂自建房）方法1、用户打开应用...
分享实测！微信微乐自建房辅助工... 分享实测！微信微乐自建房辅助工具，微乐自建房脚本免费入口（开挂自建房）器1、起透看视 微信微乐自建房...
重大通报！微乐自建房辅助工具脚... 重大通报！微乐自建房辅助工具脚本，微乐小程序免费黑科技（开挂自建房）app微乐自建房辅助工具脚本破解...
如何分辨真伪！微乐微信自建房辅... 如何分辨真伪！微乐微信自建房辅助工具插件，微乐小程序免费黑科技（开挂自建房）技巧1、微乐微信自建房辅...
我来教教你！微乐自建房辅助工具... 我来教教你！微乐自建房辅助工具挂，微乐家乡麻将自建房辅助app（开挂自建房）工具1、玩家可以在微乐家...
重大来袭！微乐自建房辅助工具神... 重大来袭！微乐自建房辅助工具神器，微乐小程序免费黑科技（开挂自建房）器1、游戏颠覆性的策略玩法，独创...
带你了解！微信卡五星辅助器，微... 带你了解！微信卡五星辅助器，微乐自建房脚本免费入口（开挂自建房）方法1、带你了解！微信卡五星辅助器，...