Необходимо парсить страницу с использованием HtmlAgilityPack, но некоторые нужные поля загружаются из JS. Как загрузить страницу полностью после выполнения всех скриптов? К примеру, вот этот код получает данные которые есть в HTML без JS:
public string GetNumberOrders(string URL)
{
string result = "";
HtmlAgilityPack.HtmlDocument doc = new HtmlWeb().Load(URL);
doc.OptionFixNestedTags = true;
HtmlNode node = doc.DocumentNode.SelectSingleNode("//*[@id='j-order-num']");
result += node.InnerHtml;
return result;
}
А вот так я пытаюсь вытянуть страницу с выполненным JS:
web1.ObjectForScripting = new MyScript();
web1.ScriptErrorsSuppressed = true;
web1.Navigate(URL);
waitTillLoad(web1);
web1.Document.InvokeScript("some_func");
HtmlAgilityPack.HtmlDocument doc = new HtmlAgilityPack.HtmlDocument();
var documentAsIHtmlDocument3 = (mshtml.IHTMLDocument3)web1.Document.DomDocument;
StringReader sr = new StringReader(documentAsIHtmlDocument3.documentElement.outerHTML);
doc.Load(sr);
result = doc.DocumentNode.OuterHtml;
Поскольку названия функций неизвестны, их не получается выполнить через Document.InvokeScript(). Как выполнить все функции не используя InvokeScript?
UPD Решено:
webControl1.Source = new Uri(URL);
while(webControl1.IsLoading)
{
Application.DoEvents();
}
return webControl1.ExecuteJavascriptWithResult("document.documentElement.outerHTML").ToString();