Я создаю сценарий очистки данных, который будет извлекать миллионы записей за один URL-вызов и вставлять в базу данных. Но это требует много проблем с увеличением памяти. Каков наилучший способ справиться с этим? Мой код выглядит примерно так:
const request = require('request');
request('call to url', response, function({
//process other stuff based on response
//call other url in looping
for(let i = 0; i < response.length; i++) {
request('call to other url', response(function({
//enter to database
})
}
})