AWSGlueCrawlerglobExcludePattern功能
创始人
2024-09-25 15:01:00
0次

AWS Glue Crawler的glob Exclude Pattern功能使得用户可以通过指定排除模式来排除不需要抓取的文件或目录。以下是一个代码示例，演示如何使用glob Exclude Pattern来排除特定类型的文件：

import boto3
client = boto3.client('glue', region_name='us-west-2')
response = client.update_crawler(
    Name='example-crawler',
    Targets={
        'S3Targets': [{
            'Path': 's3://example-data/',
            'Exclusions': ['*.csv']
        }]
    }
)

在上述代码中，Exclusions参数将地球指定的模式中所有csv文件都排除在外。

注意：在模式字符串中，*可以匹配任何字符，**匹配任何字符和任何路径段。更多的glob模式语法请参考Python glob模块的文档。

上一篇：AwsGlueCrawlerforMysql源不得到正确的类型

下一篇：AWSGlueCrawler每个文件定义一个模式。

相关内容

热门资讯

关于！微信微乐自建房辅助工具，... 关于！微信微乐自建房辅助工具，微乐家乡麻将自建房辅助app（开挂自建房）方法1）微乐家乡麻将自建房辅...
大家学习交流！微信卡五星辅助器... 大家学习交流！微信卡五星辅助器，微乐小程序免费黑科技（开挂自建房）方法1、很好的工具软件，可以解锁游...
三分钟了解！微乐微信自建房辅助... 三分钟了解！微乐微信自建房辅助工具插件，微乐家乡麻将自建房辅助app（开挂自建房）工具1、三分钟了解...
一分钟教会你！微乐家乡麻将自建... 一分钟教会你！微乐家乡麻将自建房辅助app，微乐自建房脚本免费入口（开挂自建房）方法1、用户打开应用...
分享实测！微信微乐自建房辅助工... 分享实测！微信微乐自建房辅助工具，微乐自建房脚本免费入口（开挂自建房）器1、起透看视 微信微乐自建房...
重大通报！微乐自建房辅助工具脚... 重大通报！微乐自建房辅助工具脚本，微乐小程序免费黑科技（开挂自建房）app微乐自建房辅助工具脚本破解...
如何分辨真伪！微乐微信自建房辅... 如何分辨真伪！微乐微信自建房辅助工具插件，微乐小程序免费黑科技（开挂自建房）技巧1、微乐微信自建房辅...
我来教教你！微乐自建房辅助工具... 我来教教你！微乐自建房辅助工具挂，微乐家乡麻将自建房辅助app（开挂自建房）工具1、玩家可以在微乐家...
重大来袭！微乐自建房辅助工具神... 重大来袭！微乐自建房辅助工具神器，微乐小程序免费黑科技（开挂自建房）器1、游戏颠覆性的策略玩法，独创...
带你了解！微信卡五星辅助器，微... 带你了解！微信卡五星辅助器，微乐自建房脚本免费入口（开挂自建房）方法1、带你了解！微信卡五星辅助器，...