当我尝试同时上传数百个文件时出现此问题。
API接口仅用于一个文件,因此我必须调用发送每个文件的服务。现在我有这个:
onFilePaymentSelect(event): void {
if (event.target.files.length > 0) {
this.paymentFiles = event.target.files[0];
}
let i = 0;
let save = 0;
const numFiles = event.target.files.length;
let procesed = 0;
if (event.target.files.length > 0) {
while (event.target.files[i]) {
const formData = new FormData();
formData.append('file', event.target.files[i]);
this.payrollsService.sendFilesPaymentName(formData).subscribe(
(response) => {
let added = null;
procesed++;
if (response.status_message === 'File saved') {
added = true;
save++;
} else {
added = false;
}
this.payList.push({ filename, message, added });
});
i++;
}
}
[实际上,我有一段时间将每个文件发送到API,但是我收到大量文件的消息“ 429太多请求”。有什么办法可以改善吗?
使用可观察对象将使该任务更易于推理(而不是使用命令式编程)。
浏览器通常允许您并行发出6个请求,并将其他请求排队。但是我们不希望浏览器为我们管理该队列(或者,如果我们在节点环境中运行,那么我们就不会拥有该队列)。
我们想要什么:我们要上传很多文件。通过始终并行运行5个请求,应尽可能高效地对它们进行排队和上传。 (因此我们为应用程序中的其他请求保留1个免费空间)。
为了演示,让我们先构建一些模拟:
function randomInteger(min, max) {
return Math.floor(Math.random() * (max - min + 1)) + min;
}
const mockPayrollsService = {
sendFilesPaymentName: (file: File) => {
return of(file).pipe(
// simulate a 500ms to 1.5s network latency from the server
delay(randomInteger(500, 1500))
);
}
};
// array containing 50 files which are mocked
const files: File[] = Array.from({ length: 50 })
.fill(null)
.map(() => new File([], ""));
我认为上面的代码是不言自明的。我们正在生成模拟,因此我们可以看到代码的核心将如何真正运行,而无需真正访问您的应用程序。
现在,主要部分:
const NUMBER_OF_PARALLEL_CALLS = 5;
const onFilePaymentSelect = (files: File[]) => {
const uploadQueue$ = from(files).pipe(
map(file => mockPayrollsService.sendFilesPaymentName(file)),
mergeAll(NUMBER_OF_PARALLEL_CALLS)
);
uploadQueue$
.pipe(
scan(nbUploadedFiles => nbUploadedFiles + 1, 0),
tap(nbUploadedFiles =>
console.log(`${nbUploadedFiles}/${files.length} file(s) uploaded`)
),
tap({ complete: () => console.log("All files have been uploaded") })
)
.subscribe();
};
onFilePaymentSelect(files);
from
将文件一一发送到一个可观察的文件中>>map
,我们准备了1个文件的请求(但是由于我们未订阅该文件,并且可观察的对象很冷,因此该请求只是准备就绪,未触发!)mergeMap
来运行呼叫池。由于mergeMap
将并发作为参数,因此我们可以说“请同时运行最多5个调用”scan
用于显示目的(以计算已成功上传的文件数)这是现场演示:https://stackblitz.com/edit/rxjs-zuwy33?file=index.ts
打开控制台,看看我们不会一次全部上传它们