在Node.js中,async.eachOfLimit方法允许您并行迭代一个集合,并控制并发数量。以下是一个解决方案的示例代码,使用async.eachOfLimit限制HTTP请求的数量为10:
const async = require('async');
const request = require('request');
// 创建一个包含URL的数组
const urls = [
'http://example.com/url1',
'http://example.com/url2',
'http://example.com/url3',
// ...
// 添加更多的URL
];
// 定义并发限制为10
const concurrencyLimit = 10;
// 迭代URL数组,并发限制为10
async.eachOfLimit(urls, concurrencyLimit, function(url, index, callback) {
// 发起HTTP请求
request(url, function(error, response, body) {
if (error) {
// 处理错误
console.error('Error:', error);
} else {
// 处理响应
console.log('Response:', body);
}
// 调用回调函数,表示当前任务完成
callback();
});
}, function(error) {
if (error) {
// 迭代过程中发生错误
console.error('Error:', error);
} else {
// 所有任务完成
console.log('All requests completed.');
}
});
在上述示例中,我们使用了async.eachOfLimit方法来并行迭代URL数组,并使用request库发起HTTP请求。通过将并发限制设置为10,我们可以确保同时最多只有10个请求在进行。一旦一个请求完成,就会立即开始下一个请求,直到所有请求都完成。最后,我们在回调函数中处理所有请求完成的情况。