不能使用AWS Glue控制台创建依赖于爬虫的触发器。
创始人
2024-12-27 06:00:25
0

要创建依赖于爬虫的触发器,您可以使用AWS Glue API来完成。以下是一个使用Boto3 Python库的代码示例:

import boto3

glue = boto3.client('glue')

# 创建一个爬虫
response = glue.create_crawler(
    Name='my-crawler',
    Role='arn:aws:iam::123456789012:role/Glue_DefaultRole',
    DatabaseName='my-database',
    Targets={
        'S3Targets': [
            {
                'Path': 's3://my-bucket/raw-data/'
            }
        ]
    }
)

# 等待爬虫完成
glue.get_waiter('crawler_complete').wait(
    CrawlerName='my-crawler'
)

# 获取爬虫的最新运行
response = glue.get_crawler_metrics(
    CrawlerNameList=[
        'my-crawler',
    ]
)

# 创建一个触发器并将其与爬虫关联
response = glue.create_trigger(
    Name='my-trigger',
    Type='SCHEDULED',
    Actions=[
        {
            'CrawlerName': 'my-crawler'
        },
    ],
    Schedule='cron(0 0 * * ? *)'
)

# 打印触发器ARN
print(response['Trigger']['Arn'])

请注意,上述代码假定您已经配置了AWS CLI,并且具有适当的IAM角色和权限来创建和管理AWS Glue资源。

您可以根据需要调整代码中的参数,例如爬虫名称、IAM角色、数据库名称、S3路径和触发器计划。

相关内容

热门资讯

科普攻略!德普之星辅助器app... 科普攻略!德普之星辅助器app,we poker辅助器,德州论坛(有挂软件)是一款可以让一直输的玩家...
重大科普!佛手在线大菠萝智能辅... 重大科普!佛手在线大菠萝智能辅助器,wepoker作弊辅助,分享教程(有挂软件);原来确实真的有挂(...
一分钟教会你!wepoker怎... 一分钟教会你!wepoker怎么增加运气,epoker透视,切实教程(有挂透视)1、点击下载安装,微...
六分钟了解!hhpoker有辅... 六分钟了解!hhpoker有辅助吗,wepoker国外版透视,扑克教程(有挂技巧)科技教程也叫必备教...
我来教大家!wepoker辅助... 我来教大家!wepoker辅助透视,wepoker免费脚本弱密码,详细教程(有挂透明);wepoke...
记者发布!wpk辅助,德普之星... 记者发布!wpk辅助,德普之星透视辅助软件激活码,解密教程(有挂辅助);亲真的是有正版授权,小编(透...
揭秘攻略!aapoker万能辅... 《揭秘攻略!aapoker万能辅助器,hhpoker真的假的,揭秘教程(有挂教程)》 aapoker...
重大通报!sohoo poke... 自定义sohoo poker辅助器系统规律,只需要输入自己想要的开挂功能,一键便可以生成出微扑克专用...
三分钟了解!wpk辅助器,hh... 1、三分钟了解!wpk辅助器,hhpoker免费辅助器,必赢教程(有挂神器);详细教程。2、hhpo...
玩家必看攻略!wejoker私... 玩家必看攻略!wejoker私人辅助软件,智星德州可以透视吗,透明挂教程(有挂技巧)关于智星德州可以...