AWSWAF日志分区投影:分区不在元存储中。
创始人
2024-09-27 18:00:24
0
  1. 确认AWS WAF日志分区是否存在于S3桶中 在AWS控制台中,找到对应S3桶,并确认AWS WAF日志分区是否存在于桶中。

  2. 更新AWS Glue元存储 查询日志分区的信息是否正确,然后通过AWS Glue控制台更新元存储。

  3. 更新AWS Glue crawler 如果AWS Glue元存储中没有包含AWS WAF日志分区,则需要使用AWS Glue crawler更新元存储。使用AWS Glue console创建新的crawler,将其配置为扫描日志分区所在的桶,并运行crawler以更新元存储。

以下是更新AWS Glue元数据的Python示例代码:

import boto3
import json

client = boto3.client('glue', region_name='your-region')

database_name = 'your-database-name'
table_name = 'your-table-name'

location = 's3://your-bucket-name/your-partition-path'

table_input = {
    'Name': table_name,
    'TableType': 'EXTERNAL_TABLE',
    'Parameters': {
        'classification': 'aws-waf',
        'compressionType': 'gzip'
    },
    'StorageDescriptor': {
        'Columns': [
            {"Name":"col1","Type":"string","Comment":""},
            {"Name":"col2","Type":"string","Comment":""},
            {"Name":"col3","Type":"string","Comment":""},
            {"Name":"col4","Type":"string","Comment":""},
            {"Name":"col5","Type":"string","Comment":""},
            {"Name":"col6","Type":"string","Comment":""},
            {"Name":"col7","Type":"string","Comment":""},
            {"Name":"col8","Type":"string","Comment":""}
        ],
        'Location': location,
        'InputFormat': 'org.apache.hadoop.mapred.TextInputFormat',
        'OutputFormat': 'org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat',
        'Compressed': 'true',
        'NumberOfBuckets': -1,
        'SerdeInfo': {
            'SerializationLibrary': 'org.openx.data.jsonserde.JsonSerDe',
            'Parameters': {
                'serialization.format': '1'
            }
        },
        'BucketColumns': [],
        'SortColumns': [],
        'Parameters': {
            'classification': 'aws-waf',
            'compressionType': 'gzip'
        },
        'StoredAsSubDirectories': False
    }
}

partition_input = {
    'Values': ['your-partition

相关内容

热门资讯

据目击者称!微乐广西麻辣,微信... 据目击者称!微乐广西麻辣,微信小程序微乐房间怎么开挂(透视)教程-一贯是有挂1、全新机制【微信小程序...
据报道!山西扣点点透视插件下载... 据报道!山西扣点点透视插件下载链接,创思维激k看底牌辅助(透视)教程-果然是有挂1、山西扣点点透视插...
随着!创思维激k透视挂,约局吧... 随着!创思维激k透视挂,约局吧可以看到别人底牌(透视)神器-一直是真的挂1、进入到约局吧可以看到别人...
长期以来!新上游修改器,赣牌圈... 长期以来!新上游修改器,赣牌圈小程序破解版(透视)技巧-切实真的是有挂1、下载好赣牌圈小程序破解版正...
长期以来!鄱阳翻精辅助软件,欢... 长期以来!鄱阳翻精辅助软件,欢聚水鱼只能辅助教程(透视)教程-切实存在有挂1、金币登录送、破产送、升...
相较于以往!浙江温州游戏辅助器... 您好,浙江温州游戏辅助器这款游戏可以开挂的,确实是有挂的,需要了解加去威信【485275054】很多...
据报道!安卓闲逸辅助,战神辅助... 据报道!安卓闲逸辅助,战神辅助官方(透视)插件-总是是有挂战神辅助官方辅助器是一种具有地方特色的麻将...
迎来新发展!新挑战辅助脚本,玉... 迎来新发展!新挑战辅助脚本,玉海楼茶苑辅助器(透视)方法-真是真的有挂1、完成玉海楼茶苑辅助器辅助器...
据权威媒体报道!花花生活圈怎么... 据权威媒体报道!花花生活圈怎么装开挂,同城游辅助软件(透视)器-切实是真的挂暗藏猫腻,小编详细说明花...
刚刚!中至余干安装挂,新518... 刚刚!中至余干安装挂,新518互游脚本(透视)技巧-真是是有挂1、完成中至余干安装挂辅助器v3.3的...