0

Требуется спарсить города(сайт и xPath указаны в коде), но парсятся пустые строки(есть только outerhtml = " option value="spb> < /option" " - для питера, но нужен именно полное название - Санкт-Петербург ), как предполагаю, города загружаются через JS, поэтому их при парсе нет. вопрос очевиден: как все-таки спарсить города?

var web = new HtmlWeb();
        var document = web.Load("https://finance.rambler.ru/currencies/exchange-{city.Value}");
        var nodes = document.DocumentNode.SelectNodes("/html/body/div/main/section/section/section/section/table/tbody/tr/td/div");

ПЫ на сайте outerhtml = "option value="spb">Санкт-Петербург< /option"

4
  • /html/body/div/main/section/section/section/select/option - какой дурак так делает, малейшее изменение в верстке, и пиши пропало. а про аякс не предполагать надо, а юзать devtools и прочие снифферы
    – Rou1997
    Commented 26 июл. 2017 в 4:20
  • извиняюсь, давно не писал проект, вот код, думал это функция HAP): var web = new HtmlWeb(); var document = web.Load("finance.rambler.ru/currencies/exchange"); var nodes = document.DocumentNode.SelectNodes("/html/body/div/main/section/section/section/table/tbody/tr"); Спасибо за замечание
    – Jagiello
    Commented 26 июл. 2017 в 4:39
  • Так писал, потому что не знаком с DOM и front-end, данный пример нашел на документации HAP, под свои нужны смог изменить, в отличии от "правильного" варианта, буду исправляться
    – Jagiello
    Commented 26 июл. 2017 в 4:53
  • @FoggyFinder по работе хватает этого долбаного парсинга. бот пишу. уже в глазах мелькают эти все //a[@class='.
    – Rou1997
    Commented 26 июл. 2017 в 6:40

1 ответ 1

1
HtmlWeb web = new HtmlWeb();
HtmlDocument doc = web.Load("https://finance.rambler.ru/currencies/exchange/");

foreach (HtmlNode node in doc.DocumentNode.SelectNodes("//select[@class='towns standart-selector']//option"))
{
    string cityValue = node.Attributes["value"].Value;
    string cityName = node.NextSibling.InnerText;    
}

Вместо cityValue и cityName записываете/выводите данные туда, куда вам нужно.

2
  • почти одноникнеймцы) спасибо огромное, можете объяснить фундаментальную разницу с 'var web = new HtmlWeb(); var document = web.Load(finance.rambler.ru/currencies/exchange); var nodes = document.DocumentNode.SelectNodes(/html/body/div/main/section/section/section/table/tbody/tr);' Почему в моем случае пустые строки, а в Вашем все есть
    – Jagiello
    Commented 26 июл. 2017 в 4:43
  • <tr> - это строка в таблице, в этой строке есть ячейки <td>. При помощи .NextSibling в node'е можно перейти на следующий уровень по xPath. Вот получение данных в цикле foreach: doc.DocumentNode.SelectNodes("//section[@class='rates best-rates']//tbody//tr") Результат Чисто из-за никнейма не мог мимо пройти)
    – Jagailo
    Commented 26 июл. 2017 в 12:36

Ваш ответ

Нажимая «Отправить ответ», вы соглашаетесь с условиями пользования и подтверждаете, что прочитали политику конфиденциальности.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.