在ASP.NET Core中，可以使用中间件来修改异常情况下的响应头。以下是一个示例：

首先，创建一个自定义的中间件类，用于处理异常并修改响应头：

using System;
using System.Threading.Tasks;
using Microsoft.AspNetCore.Http;

public class CustomExceptionHandlerMiddleware
{
    private readonly RequestDelegate _next;

    public CustomExceptionHandlerMiddleware(RequestDelegate next)
    {
        _next = next;
    }

    public async Task Invoke(HttpContext context)
    {
        try
        {
            await _next(context);
        }
        catch (Exception ex)
        {
            // 处理异常并修改响应头
            context.Response.Headers.Add("X-Error-Message", ex.Message);
            context.Response.StatusCode = StatusCodes.Status500InternalServerError;
        }
    }
}

然后，在Startup.cs文件的Configure方法中，将自定义的中间件添加到请求处理管道中：

public void Configure(IApplicationBuilder app, IWebHostEnvironment env)
{
    // 其他中间件配置...

    // 添加自定义异常处理中间件
    app.UseMiddleware();

    // 其他中间件配置...
}

通过以上步骤，当发生异常时，CustomExceptionHandlerMiddleware将会捕获异常并修改响应头。在上述示例中，将异常消息添加到响应头的"X-Error-Message"字段，并设置响应状态码为500。你可以根据需要修改或扩展这个中间件来适应自己的需求。