Кукольник: Ленивые изображения не загружаются в режиме без головы

Question

Вот мой код. Я использую AdBlock Plus Extension.

У меня есть задача сделать снимок экрана для веб-страницы (используется ленивая загрузка) с изображениями на правой боковой панели под заголовком PAID CONTENT и изображениями внизу под заголовком PAID CONTENT.

const puppeteer = require('puppeteer');
const fs = require('fs');

(async () => {
  const pathToExtension = require('path').join(__dirname, 'abp_chrome');

  const browser = await puppeteer.launch({
    headless: true,
    args: [
     `--disable-extensions-except=${pathToExtension}`,
     `--load-extension=${pathToExtension}`
   ]
 });

 const page = await browser.newPage();
 await timeout(5000);
 await page.setViewport({width: 1200, height: 1200});
 await page.goto('https://edition.cnn.com/2015/07/31/world/mh370-debris- 
   investigation/index.html', {waitUntil: 'load', timeout: 0});
 await page.evaluate(() => {
   window.getDimensions = function(element) { 
    rect = element.getBoundingClientRect();
    return {
     x: rect.x,
     y: rect.y,
     width: rect.width,
     height: rect.height
  };
 };
});
await autoScroll(page);  
await page.screenshot({path: 'example.png', fullPage: true});
await browser.close();
})();

 async function timeout(ms) {
  return new Promise(resolve => setTimeout(resolve, ms));
 }

 async function autoScroll(page){
   await page.evaluate(async () => {
   await new Promise((resolve, reject) => {
   var totalHeight = 0;
   var distance = 100;
   var timer = setInterval(() => {
     var scrollHeight = document.body.scrollHeight;
     window.scrollBy(0, distance);
     totalHeight += distance;

     if(totalHeight >= scrollHeight){
      clearInterval(timer);
      resolve();
     }
    }, 500);
   });
 });
}

Я использовал прокрутку для загрузки ленивых изображений, но изображения не загружаются, как я видел на скриншоте.

Вот снимок экрана из кода. Как и на скриншоте, нет плиток с изображениями. Можно ли как-нибудь это сделать sh? 1014 *

Answer 1

Я исправил это с помощью проблемы GitHub .

Я добавил пользовательский агент:

page.setUserAgent("Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/66.0.3359.181 Safari/537.36
WAIT_UNTIL=load")

Answer 2

async function autoScroll(page){
   let criteria=3; //lazy load 3 page
   for (let pageIndex = 1; pageIndex < criteria; pageIndex++) {
      await page.evaluate(async () => {
        let x = await document.querySelectorAll(
          'set lazy element selector array'
        );
        await x[x.length - 1].scrollIntoView();
        return x.length;
      });
      await page.waitFor(1000);  
   }
}