dom1n1k
@dom1n1k

Как в Node.js выстроить очередь запросов к API с паузами?

Суть задачи:
Есть архив с научными данными за 100+ лет и есть API к нему.
Проблема в том, что суммарно там несколько миллионов записей, а API позволяет за раз получать не более 20к.
Требуется вытянуть всё по кускам, крутя цикл по годам/месяцам и делая между заходами задержки, чтобы не обрушить им сервер.
Потом всё это нужно собрать в кучу (не перепутав порядок) и сохранить в json-файл на диске.
Все сделанные мною попытки либо порядок нарушают, либо паузы не выходят, либо всё сразу.

Куда копать, что читать, какие для этого есть модули?
  • Вопрос задан
  • 269 просмотров
Решения вопроса 1
dom1n1k
@dom1n1k Автор вопроса
В общем, убил полтора дня, но разобрался и сделал всё на PHP.
Ответ написан
Комментировать
Пригласить эксперта
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы