AWSDMS在将Aurora数据库的更改操作复制到Kinesis流时,对于DELETE操作,未复制整个记录的JSON,并且在运行一段时间后停止复制。
创始人
2024-09-24 21:01:49
0

这可能是由于AWS DMS流式传输本身的限制所导致的。解决此问题的一种方法是在AWS DMS任务中启用On Failure Replication,并使用AWS Lambda函数进行转换。以下是一个示例Lambda函数,可用于将JSON转换为适合Kinesis流的格式:

import json

def lambda_handler(event, context):
    records = []
    for record in event['records']:
        operation = record['op']
        data = json.loads(record['data'])
        if operation == 'd':
            data = {
                'id': data['id']
            }
        records.append({
            'Data': json.dumps(data),
            'PartitionKey': data['id']
        })
    return {
        'records': records
    }

在此示例中,如果操作类型为“d”(即DELETE),则仅包括记录的ID字段,并使用ID作为Kinesis的分区键。

然后,将Lambda函数与AWS DMS任务关联,在任务设置的处理阶段中启用On Failure Replication,以便在任务失败时触发Lambda函数执行。

请注意,此方法仅适用于使用JSON格式的AWS DMS任务。对于其他格式,可能需要进行适当的修改。

相关内容

热门资讯

透视免费!pokeplus脚本... 透视免费!pokeplus脚本,wpk俱乐部辅助器,课程教程(有挂实锤)-哔哩哔哩1、透视免费!po...
透视科技!hhpoker俱乐部... 透视科技!hhpoker俱乐部是干嘛的,hhpoker软件可以玩吗,教程书教程(有挂讲解)-哔哩哔哩...
透视讲解!aapoker公共底... 透视讲解!aapoker公共底牌,wepoker底牌透视,模板教程(有挂教学)-哔哩哔哩1、进入到a...
透视软件!德州局脚本,拱趴大菠... 透视软件!德州局脚本,拱趴大菠萝挂哪里,资料教程(有挂总结)-哔哩哔哩1、玩家可以在拱趴大菠萝挂哪里...
透视辅助!约局吧是否有挂,we... 透视辅助!约局吧是否有挂,wepoker分析,机巧教程(有挂教学)-哔哩哔哩小薇(透视辅助)致您一封...
透视线上!大菠萝手游辅助,hh... 透视线上!大菠萝手游辅助,hhpoker是真的还是假的,攻略教程(有挂教学)-哔哩哔哩1、hhpok...
透视肯定!pokemmo脚本,... 透视肯定!pokemmo脚本,wepoker有辅助吗,资料教程(有挂教学)-哔哩哔哩1、wepoke...
透视模拟器!大菠萝免费辅助,w... 透视模拟器!大菠萝免费辅助,wepoker破解工具,法门教程(有挂头条)-哔哩哔哩1、大菠萝免费辅助...
透视安卓版!wepoker有没... 透视安卓版!wepoker有没有机器人,hhpoker脚本下载,课程教程(有挂技巧)-哔哩哔哩wep...
透视安装!wepoker公共底... 透视安装!wepoker公共底牌,pokermaster破解版,模块教程(讲解有挂)-哔哩哔哩1、完...