AWSDMS在将Aurora数据库的更改操作复制到Kinesis流时,对于DELETE操作,未复制整个记录的JSON,并且在运行一段时间后停止复制。
创始人
2024-09-24 21:01:49
0

这可能是由于AWS DMS流式传输本身的限制所导致的。解决此问题的一种方法是在AWS DMS任务中启用On Failure Replication,并使用AWS Lambda函数进行转换。以下是一个示例Lambda函数,可用于将JSON转换为适合Kinesis流的格式:

import json

def lambda_handler(event, context):
    records = []
    for record in event['records']:
        operation = record['op']
        data = json.loads(record['data'])
        if operation == 'd':
            data = {
                'id': data['id']
            }
        records.append({
            'Data': json.dumps(data),
            'PartitionKey': data['id']
        })
    return {
        'records': records
    }

在此示例中,如果操作类型为“d”(即DELETE),则仅包括记录的ID字段,并使用ID作为Kinesis的分区键。

然后,将Lambda函数与AWS DMS任务关联,在任务设置的处理阶段中启用On Failure Replication,以便在任务失败时触发Lambda函数执行。

请注意,此方法仅适用于使用JSON格式的AWS DMS任务。对于其他格式,可能需要进行适当的修改。

相关内容

热门资讯

1分钟实锤!智星德州菠萝外挂(... 1分钟实锤!智星德州菠萝外挂(德州)总是真的是有挂(详细辅助AA德州教程);1、任何智星德州菠萝外挂...
2分钟实锤!智星德州菠萝外挂(... 2分钟实锤!智星德州菠萝外挂(来玩德州)竟然是真的有挂(详细辅助技巧教程)1、任何智星德州菠萝外挂a...
第8分钟实锤!智星德州菠萝辅助... 第8分钟实锤!智星德州菠萝辅助器(德州ai)总是真的是有挂(详细辅助介绍教程)1、用户打开应用后不用...
8分钟实锤!德扑之星猫腻(德州... 8分钟实锤!德扑之星猫腻(德州wepower)确实真的是有挂(详细辅助第三方教程)1、德扑之星猫腻系...
第2分钟实锤!智星德州菠萝(线... 第2分钟实锤!智星德州菠萝(线上德州)切实有挂(详细辅助第三方教程)第2分钟实锤!智星德州菠萝(线上...
3分钟实锤!德扑ai助手(nz... 3分钟实锤!德扑ai助手(nzt德州)确实是有挂(详细辅助透明挂教程);1、玩家可以在德扑ai助手软...
第二分钟实锤!德扑之星有猫腻(... 第二分钟实锤!德扑之星有猫腻(德州app)本来真的有挂(详细辅助wpk教程)1、第二分钟实锤!德扑之...
第十分钟实锤!德州之星外挂(德... 第十分钟实锤!德州之星外挂(德州nzt)果然真的有挂(详细辅助AI教程)该软件可以轻松地帮助玩家将德...
第3分钟实锤!智星德州菠萝有挂... 第3分钟实锤!智星德州菠萝有挂吗(nzt德州)其实有挂(详细辅助科技教程)1、点击下载安装,智星德州...
第6分钟实锤!德扑之星有作弊(... 第6分钟实锤!德扑之星有作弊(nzt德州)真是存在有挂(详细辅助黑科技教程)进入游戏-大厅左侧-新手...