AWSGlueCrawlerglobExcludePattern功能
创始人
2024-09-25 15:01:00
0次

AWS Glue Crawler的glob Exclude Pattern功能使得用户可以通过指定排除模式来排除不需要抓取的文件或目录。以下是一个代码示例，演示如何使用glob Exclude Pattern来排除特定类型的文件：

import boto3
client = boto3.client('glue', region_name='us-west-2')
response = client.update_crawler(
    Name='example-crawler',
    Targets={
        'S3Targets': [{
            'Path': 's3://example-data/',
            'Exclusions': ['*.csv']
        }]
    }
)

在上述代码中，Exclusions参数将地球指定的模式中所有csv文件都排除在外。

注意：在模式字符串中，*可以匹配任何字符，**匹配任何字符和任何路径段。更多的glob模式语法请参考Python glob模块的文档。

上一篇：AwsGlueCrawlerforMysql源不得到正确的类型

下一篇：AWSGlueCrawler每个文件定义一个模式。

相关内容

热门资讯

第2分钟辅助！wejoker透... 第2分钟辅助！wejoker透视方法，wpk透视插件，操作教程（有挂详情）1）wejoker透视方法...
第2分钟辅助！pokemmo脚... 第2分钟辅助！pokemmo脚本，hhpoker可以控制牌吗，经验教程（果真有挂）1、hhpoker...
第1分钟辅助！wepoker私... 第1分钟辅助！wepoker私人局怎么玩，佛手在线大菠萝智能辅助器，资料教程（有挂神器）所有人都在同...
六分钟辅助！hhpoker德州... 六分钟辅助！hhpoker德州透视挂，wepokerplus透视脚本免费，指南教程（有挂方式）运we...
6分钟辅助！hhpoker软件... 6分钟辅助！hhpoker软件安装包，wepoker免费脚本弱密码，总结教程（有挂分析）1）wepo...
第五分钟辅助！aapoker插... 第五分钟辅助！aapoker插件下载，wepoker有辅助器吗，大纲教程（有挂工具）1、完成wepo...
第4分钟辅助！wepoker永... 第4分钟辅助！wepoker永久免费脚本，wepoker买钻石有用吗，绝活教程（有挂方针）1、下载好...
八分钟辅助！wpk作弊，wep... 八分钟辅助！wpk作弊，wepokerplus辅助，法门教程（有挂神器）1、wepokerplus辅...
七分钟辅助！wepoker私局... 七分钟辅助！wepoker私局辅助，hhpoker辅助器视频，经验教程（有挂教学）该软件可以轻松地帮...
第3分钟辅助！wepokerp... 第3分钟辅助！wepokerplus开挂，we poker游戏下，步骤教程（有挂讲解）1、wepok...