一个简单的解决方案是使用Python的set()函数来去重。在您的动态清单脚本中，使用set()来存储所有的主机名，并生成一个新的列表，保留了所有不同的主机名。下面是一个示例脚本：

#!/usr/bin/env python
import boto3
import json

# Obtain instances from AWS
ec2 = boto3.resource('ec2')
instances = ec2.instances.filter(
    Filters=[{'Name': 'instance-state-name', 'Values': ['running']}])

# Remove duplicate hostnames
hostnames = set()
for instance in instances:
    hostname = instance.private_dns_name.split('.')[0]
    if hostname not in hostnames:
        hostnames.add(hostname)

# Create inventory JSON
inventory = {}
inventory_all = {}
for hostname in hostnames:
    inventory[hostname] = {
        'hosts': [hostname],
        'vars': {}
    }

inventory_all['_meta'] = {}
inventory_all['_meta']['hostvars'] = {}

# Print inventory JSON
print(json.dumps(inventory_all))

在这个示例中，我们使用了Python的set()函数来存储所有的主机名。在遍历实例时，我们检查主机名是否已经在set()中，如果没有，我们将其添加到set()中。由于set()只会包含不同的条目，因此我们在结果中只包含不同的主机名。随后，我们创建inventory JSON，使用所有不同的主机名来创建hosts和vars字典项。最后，我们打印结果JSON。