AWSDMS在将Aurora数据库的更改操作复制到Kinesis流时,对于DELETE操作,未复制整个记录的JSON,并且在运行一段时间后停止复制。
创始人
2024-09-24 21:01:49
0

这可能是由于AWS DMS流式传输本身的限制所导致的。解决此问题的一种方法是在AWS DMS任务中启用On Failure Replication,并使用AWS Lambda函数进行转换。以下是一个示例Lambda函数,可用于将JSON转换为适合Kinesis流的格式:

import json

def lambda_handler(event, context):
    records = []
    for record in event['records']:
        operation = record['op']
        data = json.loads(record['data'])
        if operation == 'd':
            data = {
                'id': data['id']
            }
        records.append({
            'Data': json.dumps(data),
            'PartitionKey': data['id']
        })
    return {
        'records': records
    }

在此示例中,如果操作类型为“d”(即DELETE),则仅包括记录的ID字段,并使用ID作为Kinesis的分区键。

然后,将Lambda函数与AWS DMS任务关联,在任务设置的处理阶段中启用On Failure Replication,以便在任务失败时触发Lambda函数执行。

请注意,此方法仅适用于使用JSON格式的AWS DMS任务。对于其他格式,可能需要进行适当的修改。

相关内容

热门资讯

关于!微信微乐自建房辅助工具,... 关于!微信微乐自建房辅助工具,微乐家乡麻将自建房辅助app(开挂自建房)方法1)微乐家乡麻将自建房辅...
大家学习交流!微信卡五星辅助器... 大家学习交流!微信卡五星辅助器,微乐小程序免费黑科技(开挂自建房)方法1、很好的工具软件,可以解锁游...
三分钟了解!微乐微信自建房辅助... 三分钟了解!微乐微信自建房辅助工具插件,微乐家乡麻将自建房辅助app(开挂自建房)工具1、三分钟了解...
一分钟教会你!微乐家乡麻将自建... 一分钟教会你!微乐家乡麻将自建房辅助app,微乐自建房脚本免费入口(开挂自建房)方法1、用户打开应用...
分享实测!微信微乐自建房辅助工... 分享实测!微信微乐自建房辅助工具,微乐自建房脚本免费入口(开挂自建房)器1、起透看视 微信微乐自建房...
重大通报!微乐自建房辅助工具脚... 重大通报!微乐自建房辅助工具脚本,微乐小程序免费黑科技(开挂自建房)app微乐自建房辅助工具脚本破解...
如何分辨真伪!微乐微信自建房辅... 如何分辨真伪!微乐微信自建房辅助工具插件,微乐小程序免费黑科技(开挂自建房)技巧1、微乐微信自建房辅...
我来教教你!微乐自建房辅助工具... 我来教教你!微乐自建房辅助工具挂,微乐家乡麻将自建房辅助app(开挂自建房)工具1、玩家可以在微乐家...
重大来袭!微乐自建房辅助工具神... 重大来袭!微乐自建房辅助工具神器,微乐小程序免费黑科技(开挂自建房)器1、游戏颠覆性的策略玩法,独创...
带你了解!微信卡五星辅助器,微... 带你了解!微信卡五星辅助器,微乐自建房脚本免费入口(开挂自建房)方法1、带你了解!微信卡五星辅助器,...