1

Добрый день. Я пишу парсер HTML-страницы на Selenium. Чтоб получить страницу, в сервис нужно сначала залогиниться. Страница логина содержит огромное количество JavaScript, который сначала выполняется, а потом пользователю показывается уже "отрисованная" страница.

Когда я отрабатывала маневры залогинивания с имеющим интерфейс ChromeDriver-ом, все было прекрасно, на странице присутствовали элементы ввода логина и пароля, WebDriver их успешно находил, засылал значения, кликал кнопку и вуаля. Но для "боевой" реализации мне нужно безинтерфейсное решение. Я рассчитывала на SimpleBrowserDriver, но в нем почему-то при той же последовательности действий не выполняется JavaScript. Страничка через SimpleBrowserDriver после

    driver.Navigate().GoToUrl("https://address.com/login/");

получается такая же, как в обычном браузере при отключенном JavaScript, и нужных полей в ней нет. Можно ли как-то "пропинать" изнутри SimpleBrowserDriver, вызвать какие-то события, чтоб он сначала выполнил весь JavaScript, а потом уже вернул мне страницу? Нашла информацию про JavascriptExecutor, но мне надо не свои скрипты выполнять на запрашиваемой странице, а скрипты самой страницы.

3
  • Посмотрите в сторону PhantomJS. В своё время использовал его для этих целей, правда, из Java. P.S. Прошу прощения, не сразу увидел Ваш комментарий под ответом. Вот и хорошо, что всё получилось :)
    – spopovru
    17 ноя 2016 в 14:47
  • Спасибо! PhantomJS хотя бы показывает нужные поля. Правда, тоже не без багов - похоже, пытается выполнять мой код быстрее, чем у него загружаются нужные данные, так что придется его какими-то хендлерами обвешивать (потому что ставить sleep и надеяться, что мы всё успели, как-то неправильно) и ловить события. Буду разбираться.
    – Natalia
    17 ноя 2016 в 15:01
  • 1
    Natalia, попробуйте поставить ожидание загрузки нужного Вам элемента. Пример вроде есть вот здесь: stackoverflow.com/questions/25374382/…
    – spopovru
    17 ноя 2016 в 15:04

1 ответ 1

1

У SimpleBrowser отсутствует поддержка JavaScript, ищите другие пути решения

No javascript though, but frankly, if you need javascript support, you'll lose most of the performance gain of a headless browser anyway (because of all the extra requests you'll have to do).

Источник: GitHub SimpleBrowser WebDriver

1
  • 1
    Спасибо. Подключила PhantomJS, он вроде смог загрузить всё как надо.
    – Natalia
    17 ноя 2016 в 13:55

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge you have read our privacy policy.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.