解决AWS Lambda与RDS上的MySQL数据库连接间歇性超时问题，可以尝试以下方法：

1. 增加Lambda函数的超时时间：默认情况下，AWS Lambda函数的超时时间为3秒，如果数据库查询或操作需要更长时间，则可以增加Lambda函数的超时时间。在Lambda函数的配置中，将超时时间适当增加。

2. 增加RDS数据库的连接池大小：使用连接池可以减少连接的打开和关闭次数，提高性能。在Lambda函数中，可以使用连接池来管理与RDS数据库的连接。以下是一个使用连接池的示例代码：

import mysql.connector.pooling

# 创建连接池
cnxpool = mysql.connector.pooling.MySQLConnectionPool(
    pool_name="my_pool",
    pool_size=5,
    host='your_rds_host',
    database='your_database',
    user='your_username',
    password='your_password'
)

# 处理Lambda事件的函数
def lambda_handler(event, context):
    # 从连接池中获取连接
    cnx = cnxpool.get_connection()

    try:
        # 执行数据库查询或操作
        cursor = cnx.cursor()
        cursor.execute("SELECT * FROM your_table")
        rows = cursor.fetchall()
        cursor.close()

        # 处理查询结果
        for row in rows:
            # 处理每一行数据
            pass

    finally:
        # 将连接放回连接池
        cnx.close()

3. 增加RDS数据库的最大连接数限制：如果RDS数据库的最大连接数限制较低，可能会导致Lambda函数无法建立足够的连接。在RDS数据库的配置中，可以适当增加最大连接数限制。

4. 调整RDS数据库的连接超时时间：如果RDS数据库的连接超时时间较短，可能会导致Lambda函数与数据库连接断开。在RDS数据库的配置中，可以适当增加连接超时时间。

5. 使用适当的数据库操作和查询优化：如果Lambda函数中的数据库操作和查询较为复杂或耗时较长，可以考虑优化查询语句、添加索引或调整数据库表结构，以提高数据库性能和响应速度。

注意：以上方法仅为解决AWS Lambda与RDS上的MySQL数据库连接间歇性超时问题的一些常见手段，具体的解决方法可能因具体情况而异。建议根据实际需求和情况进行调整和优化。