* подробнее в комментариях
Я использую cheerio. js для очистки данных и отображения в 3 HTML таблицах. Он работает правильно, за исключением того, что во 2-й и 3-й таблицах эти пустые строки добавляются перед отображением очищенных данных (1-я таблица имеет 25 строк, 2-я таблица имеет 25 пустых строк, затем 25 строк данных. 3-я таблица имеет 50 пустых строк, затем 25 строк данных).
Я считаю, что это связано с очисткой всех данных с помощью одного запроса, а не с очисткой одной таблицы для каждой таблицы.
Это мой первый очиститель, поэтому мне интересно, есть способ изменить свой код, чтобы исправить это, или если мне нужно иметь 1 запрос на очистку для каждой таблицы (но это кажется неэффективным).
Дайте мне знать, если вы хотите увидеть мой mon goose schema.
HTML таблица для отображения данных (с использованием e js):
<table>
<tr>
<th>Environment</th>
<th>Store Name</th>
<th>Code Version</th>
</tr>
<% stores.forEach(function(store){ %>
<tr>
<td> <%= store.environment.QA1 %> </td>
<td> <%= store.store.QA1 %> </td>
<td> <%= store.version.QA1 %> </td>
</tr>
<% }); %>
</table>
cheerio. js для очистки информации:
router.get("/scrape", function(req, res){
request("http://link-goes-here", function(error, response, html){
var $ = cheerio.load(html);
var QAStoreInfo = [];
var QA1StoreInfo = [];
$("body > table > tbody > tr > td:nth-child(1) > table").addClass("row");
$('.row > tbody > tr:contains("QA")').each(function(i, element){
var QAResult = {
"environment.QA" : $(this).children().next(),
"store.QA" : $(this).children().next().next(),
"version.QA" : $(this).children().next().next().next()
};
QAStoreInfo.push(QAResult);
Store.count({}, function(err, test){
if (test === 0) {
var QAEntry = new Store(QAResult);
QAEntry.save(function(err, doc){
if(err){
console.log(err);
}
});
}
});
});
/* QA1 */
$('.row > tbody > tr:contains("QA1")').each(function(i, element){
var QA1Result = {
"environment.QA1" : $(this).children().next(),
"store.QA1" : $(this).children().next().next(),
"version.QA1" : $(this).children().next().next().next()
};
QA1StoreInfo.push(QA1Result);
Store.count({}, function(err, test){
if (test === 0) {
var QA1Entry = new Store(QA1Result);
QA1Entry.save(function(err, doc){
if(err){
console.log(err);
}
});
}
});
});
mon goose schema:
var storeSchema = new mongoose.Schema({
environment: {
QA: String,
QA1: String,
QA2: String
},
store: {
QA: String,
QA1: String,
QA2: String
},
version: {
QA: String,
QA1: String,
QA2: String
}
});
mongoDB collection after / scrape call:
{ "_id" : ObjectId("5f0610fee9b4c35d74a83600"), "environment" : { "QA1" : " QA1 " }, "store" : { "QA1" : " Omega QA " }, "version" : { "QA1" : " _2019.11_2019_11.2 " }, "__v" : 0 }
{ "_id" : ObjectId("5f0610fee9b4c35d74a83601"), "environment" : { "QA1" : " QA1 " }, "store" : { "QA1" : " Crescent Centre " }, "version" : { "QA1" : " _2020.06_2020_06.6 " }, "__v" : 0 }
{ "_id" : ObjectId("5f0610fee9b4c35d74a83602"), "environment" : { "QA1" : " QA1 " }, "store" : { "QA1" : " Cumberland " }, "version" : { "QA1" : " _2019.11_2019_11.2 " }, "__v" : 0 }
{ "_id" : ObjectId("5f0610fee9b4c35d74a83603"), "environment" : { "QA1" : " QA1 " }, "store" : { "QA1" : " East Denver " }, "version" : { "QA1" : " _2019.11_2019_11.2 " }, "__v" : 0 }
{ "_id" : ObjectId("5f0610fee9b4c35d74a83604"), "environment" : { "QA1" : " QA1 " }, "store" : { "QA1" : " Brookwood " }, "version" : { "QA1" : " _2019.11_2019_11.2 " }, "__v" : 0 }
{ "_id" : ObjectId("5f0610fee9b4c35d74a83605"), "environment" : { "QA1" : " QA1 " }, "store" : { "QA1" : " WheatRidge " }, "version" : { "QA1" : " _2019.11_2019_11.2 " }, "__v" : 0 }
{ "_id" : ObjectId("5f0610fee9b4c35d74a83606"), "environment" : { "QA1" : " QA1 " }, "store" : { "QA1" : " Aurora Centerpoint " }, "version" : { "QA1" : " _2020.06_2020_06.6 " }, "__v" : 0 }
{ "_id" : ObjectId("5f0610fee9b4c35d74a83607"), "environment" : { "QA1" : " QA1 " }, "store" : { "QA1" : " Castle Rock " }, "version" : { "QA1" : " _2020.06_2020_06.6 " }, "__v" : 0 }
{ "_id" : ObjectId("5f0610fee9b4c35d74a83608"), "environment" : { "QA1" : " QA1 " }, "store" : { "QA1" : " Conyers " }, "version" : { "QA1" : " _2020.06_2020_06.6 " }, "__v" : 0 }
скриншот: (как отображается вторая таблица) введите описание изображения здесь