0

Все гайды по puppeteer довольно примитивны.

const puppeteer = require('puppeteer');

(async function() {
  const browser = await puppeteer.launch({ 
      headless: false, 
      defaultViewport: null
  });
  const page = await browser.newPage();
  await page.goto('https://url.com/', { waitUntil: 'networkidle2' });
  await page.click('#button-filters');
  await page.click('label[for="filter-type-pack"]');  // После второго и третьего клика
  await page.click('label[for="order_by-date"]');     // страница отправляет ajax-запрос

  // . . .

  await browser.close();
})();

В месте кода, где три точки (. . .) по мануалам предлагается подождать одну или несколько секунд с помощью метода page.waitFor(1000) и извлекать результат запроса из DOM получившейся страницы. Проблема состоит в том, что: а) нет гарантий что ajax-запрос завершится за отведенное на ожидание время, б) в конечном DOM нет нужной для меня информации, но эта информация есть в теле ответа сервера по ajax-запросу.

Соответственно и вопроса два:

Как дождаться ответа по запросу либо ошибки подключения гарантированно?

Как извлечь информацию из тела ответа по ajax-запросу?

1 ответ 1

1

Можно через обработчик события 'response':

import puppeteer from 'puppeteer';

const browser = await puppeteer.launch();

try {
  const [page] = await browser.pages();

  await page.goto('https://example.org/');

  page.addListener('response', async (response) => {
    if (response.url() === 'https://example.org/?foo') {
      page.removeAllListeners('response');
      console.log(await response.text());
      await browser.close();
    }
  });

  page.evaluate(() => { fetch('https://example.org/?foo'); });
} catch(err) { console.error(err); }
3
  • А если запрос завершится ошибкой?
    – DiD
    13 дек 2020 в 21:17
  • То есть, я имею в виду, что может try{await fetch(url)}catch(err){console.log(err)} бы и выдал мне какую-нибудь ошибку, но мой запрос запускается кликом по radio-элементу формы, и, случись, например, какая-нибудь ошибка сети, есть вероятность, что событие response никогда не выполнится, а выполнение скрипта просто зависнет.
    – DiD
    13 дек 2020 в 21:30
  • Думаю, для этих случаев можно слушать 'requestfailed'. 13 дек 2020 в 21:49

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge that you have read and understand our privacy policy and code of conduct.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.