1

Добрый день. Решая задачу связанную с парсингом сайта наткнулся на проблему. Есть страница сайта суда, где ежедневно публикуются объявления о банкротстве (http://vgsu.arbitr.gov.ua/pages/157) . Как можно видеть из исходного сама форма поиска и таблица с объявлениями спрятана в php документе. Если попытаться получить исходный код сайта с помощью Google Chrome (нажать "Посмотреть код") то можно получить полнейший текст сайта, откуда можно спарсить необходимую информацию. При получении же исходного кода через С# (HttpRequest или получение кода с элемента WebBrowser.DocumentText) дает сжатую версию кода. Как можно в C# получить полнейший код сайта как в Google Chrome?

Заранее благодарю!

Наглядно: в C# я получаю

 <TD><iframe name="forma" src="http://ovsb.ics.gov.ua/view/vgsu/bankrut.php" width="100%" height="2200px" align="left" frameborder="no" scrolling="" >No Frame Support!</iframe>

а через Google Chrome Ctrl+Shift+I (Где уже есть конкретная информация о количестве записей. Выделил красным)

введите сюда описание изображения

13
  • Что Вы понимаете под сжатой ? То, что вместо кода скрипта Вы видите его подключение ? <script src="..."></script>
    – isnullxbh
    24 авг 2016 в 10:28
  • И еще вопрос: Ctrl-Shift-U или же Ctrl-U. Несущественно, конечно. Однако Ctrl-U работает, а второй вариант - нет.
    – isnullxbh
    24 авг 2016 в 10:39
  • отредактировал вопрос с подробностями. Ctrl+SHIFT+I, поправил
    – Belka23
    24 авг 2016 в 10:39
  • Делал подобное. С сервисом мониторинга аккций. Есть скрипт. Есть csv-файл. Скрипт тянет csv, парсит его, и то, что Вы видите у себя на экране - это его содержимое. Подебажьте, так ли это в Вшем случае.Если не получится, могу я попробовать.
    – isnullxbh
    24 авг 2016 в 10:41
  • можно поподробнее о данном способе?
    – Belka23
    24 авг 2016 в 10:43

1 ответ 1

1

Чтобы не загаживать комментарии, оформлю в отдельный ответ. В Вашем случае поиск нужных записей осуществляется при нажатии клавии "Пошукать" )) У кнопки есть идентификатор #search. Ищете в коде этот идентификатор (в скриптах). В Вашем случае - это самый первы подключенный скрипт. Далее, дебажите, или просто разбираете js-код. Когда разберетесь, будете знать, как формируется url для загрузки CSV. Все.

По поводу веб-клиента. Вот вы открываете в браузере эту страницу - все видите, пробуете сделать это в C# через веб-клиент - никак. А почему ? А потому что браузер у Вас подгрзуит скрипты, и они отработают. Веб-клиент никаких скриптов не подгружает и не должен этого делать.

2
  • Собственно вот до чего я дошел. POST запрос передается на страницу ovsb.ics.gov.ua/view/vgsu/bank_content.php с параметрами в "sEcho=4&iColumns=9&sColumns=&iDisplayStart......." но когда я просто пытаюсь вставить это в строку браузера у меня вылетает 403 Forbidden :c
    – Belka23
    24 авг 2016 в 14:14
  • Вот Вам curl запрос, надеюсь, теперь сможете разобраться до конца.
    – isnullxbh
    24 авг 2016 в 17:42

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge you have read our privacy policy.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.