AWSWAF日志分区投影:分区不在元存储中。
创始人
2024-09-27 18:00:24
0
  1. 确认AWS WAF日志分区是否存在于S3桶中 在AWS控制台中,找到对应S3桶,并确认AWS WAF日志分区是否存在于桶中。

  2. 更新AWS Glue元存储 查询日志分区的信息是否正确,然后通过AWS Glue控制台更新元存储。

  3. 更新AWS Glue crawler 如果AWS Glue元存储中没有包含AWS WAF日志分区,则需要使用AWS Glue crawler更新元存储。使用AWS Glue console创建新的crawler,将其配置为扫描日志分区所在的桶,并运行crawler以更新元存储。

以下是更新AWS Glue元数据的Python示例代码:

import boto3
import json

client = boto3.client('glue', region_name='your-region')

database_name = 'your-database-name'
table_name = 'your-table-name'

location = 's3://your-bucket-name/your-partition-path'

table_input = {
    'Name': table_name,
    'TableType': 'EXTERNAL_TABLE',
    'Parameters': {
        'classification': 'aws-waf',
        'compressionType': 'gzip'
    },
    'StorageDescriptor': {
        'Columns': [
            {"Name":"col1","Type":"string","Comment":""},
            {"Name":"col2","Type":"string","Comment":""},
            {"Name":"col3","Type":"string","Comment":""},
            {"Name":"col4","Type":"string","Comment":""},
            {"Name":"col5","Type":"string","Comment":""},
            {"Name":"col6","Type":"string","Comment":""},
            {"Name":"col7","Type":"string","Comment":""},
            {"Name":"col8","Type":"string","Comment":""}
        ],
        'Location': location,
        'InputFormat': 'org.apache.hadoop.mapred.TextInputFormat',
        'OutputFormat': 'org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat',
        'Compressed': 'true',
        'NumberOfBuckets': -1,
        'SerdeInfo': {
            'SerializationLibrary': 'org.openx.data.jsonserde.JsonSerDe',
            'Parameters': {
                'serialization.format': '1'
            }
        },
        'BucketColumns': [],
        'SortColumns': [],
        'Parameters': {
            'classification': 'aws-waf',
            'compressionType': 'gzip'
        },
        'StoredAsSubDirectories': False
    }
}

partition_input = {
    'Values': ['your-partition

相关内容

热门资讯

透视插件!aapoker有外挂... 透视插件!aapoker有外挂,德州ai人工智能软件免费,其实真的有挂(详细辅助解密教程);透视插件...
透视了解!德扑之星有猫腻,we... 透视了解!德扑之星有猫腻,wepoke用模拟器有什么用,本来真的是有挂(详细辅助详细教程)进入游戏-...
透视智能ai!微扑克系统发牌规... 透视智能ai!微扑克系统发牌规律,hm3德州辅助,原来真的有挂(详细辅助必胜教程)1、每一步都需要思...
透视新版!微扑克ai机器人,f... 透视新版!微扑克ai机器人,fishpoker扑克辅助,原来真的有挂(详细辅助透牌教程);1、点击下...
透视最新!wepower辅助器... 透视最新!wepower辅助器,德州wpk德州真的,一直存在有挂(详细辅助揭秘攻略)1、玩家可以在w...
透视挂透视!wepoke计算辅... 透视挂透视!wepoke计算辅助,红龙扑克是真是假,真是真的是有挂(详细辅助安装教程)1、wepok...
透视app!德州之星辅助挂,菠... 透视app!德州之星辅助挂,菠萝德州辅助神器,好像真的有挂(详细辅助微扑克教程)1)德州之星辅助挂辅...
透视神器!aapoker辅助,... 透视神器!aapoker辅助,德州之星app辅助器,竟然有挂(详细辅助德州论坛);1、aapoker...
透视有挂!微扑克ai辅助,wp... 透视有挂!微扑克ai辅助,wpk伙牌,切实是真的有挂(详细辅助玩家教你);1、超多福利:超高返利,海...
透视教学!WPK透视辅助,we... 透视教学!WPK透视辅助,wepoke挂真的假的,好像有挂(详细辅助玩家教程)1、WPK透视辅助系统...