6

Поток с WebBrowser после определённой итерации зависает в ожидании примерно на 5 минут в коде потока:

while (wb.ReadyState != WebBrowserReadyState.Complete) 
  { System.Windows.Forms.Application.DoEvents(); }

где значение состояния равно:

wb.ReadyState == Uninitialized или Interactive

в итоге возвращает страницу "Navigation canceled" - либо возвращает её уже с 5 минутными задержками.

  1. Почему компонент WebBrowser использует IE как 7-ой версии, если у меня в системе стоит IE8?
  2. Почему компонент WebBrowser перестаёт отдавать страницы?
  3. Почему объём память растёт приложения и в итоге занимает около 800 мб?

У меня стоит задача сохранить отображение страницы на жёсткий диск, используя консольное приложение. Возможно можно как-то в pdf или ещё в какой формат сохранить, чтобы можно было увидеть содержимое HTML странцы.

Я задавал вопрос здесь но ненашёл где написать продолжение:)

Буду рад любому ценному комментарию.

    class Program
    {
    static string url = "http://www.whatbrowser.org";
    static int width = 960, height = 1380;
    static int count = 0;

    [STAThread]
    static void Main(string[] args)
    {
        Console.WriteLine("hi");

        try
        {
            int number = 1000;
            for (int i = 0; i < number; i++)
            {
                var th = new Thread(obj => RunGenerateScreenshotThread((string)obj));
                th.SetApartmentState(ApartmentState.STA);
                th.Start(url);
                th.Join();

                count++;
            }

            Console.WriteLine("All successfully completed!");
            Console.ReadKey(true);
        }
        catch (Exception ex)
        {
            Console.WriteLine("Error: {0}", ex.ToString());
        }
    }

    static void RunGenerateScreenshotThread(string url)
    {
        try
        {
            using (WebBrowser wb = new WebBrowser())
            {
                // Set the size of the WebBrowser control
                wb.Width = width;
                wb.Height = height;

                //wb.DocumentCompleted += GenerateScreenshotCompleted;
                wb.Navigate(url);

                while (wb.ReadyState != WebBrowserReadyState.Complete) 
                  { System.Windows.Forms.Application.DoEvents(); }

                if (wb.DocumentTitle == "Navigation Canceled")
                    Console.WriteLine("Natigated ERROR {0}", count);
                else
                    Console.WriteLine("Natigated OK {0}", count);
                }
        }
        catch (Exception ex)
        {
            Console.WriteLine("Error: {0}", ex.ToString());
        }
        finally
        {
            Application.ExitThread();   // Stops the thread
        }
    }
}

3 ответа 3

4
  1. нужно явно включить использования для своего приложения, прописав в реестре ключик.

  2. что третий вопрос является ответом на второй.

  3. а вот это сложный вопрос. сейчас практически все браузеры кушают очень много.

upd

Как бы я сделал. Отдельное приложение, которое получает два параметра - урл и куда сохранить (можно через параметры, можно через пайп). Его задача проста - загрузил, заскриншотил и отдал.

Второе приложение в цикле запускает первое, передавая ему параметры (на первых порах это может быть обычный батник).

плюсы:

  • очень легко получается сделать для разных версий IE - просто два приложения, для одного прописан правильный webbrowser
  • падения "скриншотерра" безопасно для основного приложения.
  • так как приложение закрывается каждый раз, то это такой "костыль" против утечек.

минусы:

  • возможно некое падение скорости (но это ещё нужно проверить)
  • нужно следить за дочерними процессами
3
  • Большое спасибо за помощь :) Сделал отдельное приложение - работает :) Один из минусов подтвердился - при запуске приложения довольно интенсивно используеться процессор :) 6 фев 2013 в 7:30
  • 1
    А вот теперь можно улучшить. Сделайте работу через сокет/пайп и пусть это дополнительное приложение сможет конвертировать несколько страниц. Основная программа запускает, дает подключиться к себе и начинает процесс. А далее, раз на 10 конвертаций просто перезапускает дочерний процесс. Либо контроллирует используемую память и перезапускает по необходимости.
    – KoVadim
    6 фев 2013 в 7:51
  • Спасибо за идею :) 6 фев 2013 в 13:16
1

Браузер можно запускать в отдельном Thread + Task.
Работает в WinForms и Console Application

using System;
using System.Windows.Forms;
using System.Threading;
using System.Threading.Tasks;

static Task<T> Navigate<T>(Uri url, Func<HtmlDocument,T> callback) {
   var ts = new TaskCompletionSource<T>();
   var t = new Thread(() => {
     var wb = new WebBrowser() { AllowNavigation=true, ScriptErrorsSuppressed=true };
     wb.DocumentCompleted += (s, e) => ts.SetResult(callback(wb.Document));
     wb.Navigate(url);
     while (!ts.Task.IsCompleted) Application.DoEvents();
   });
   t.TrySetApartmentState(ApartmentState.STA);
   t.Start();
   return ts.Task;
}

var t = Navigate(Uri("http://ru.stackoverflow.com"), 
            doc => {
               return doc.Body.InnerHtml;  // передается в t.Result
            });
0

Есть еще одна проблема вот в этих строчках.

while (wb.ReadyState != WebBrowserReadyState.Complete) 
{ System.Windows.Forms.Application.DoEvents(); }

В нормальном состоянии, при отсутствии событий программа засыпает и не расходует время процессора. Но ваш цикл так делать не умеет.

Цикл обработки событий надо "крутить" через Application.Run, обязательно передав ему любую форму - тогда с процессорным временем все будет в порядке.

Должно получиться примерно так:

static void RunGenerateScreenshotThread(string url)
{
    try
    {
        using (WebBrowser wb = new WebBrowser())
        {
            // Set the size of the WebBrowser control
            wb.Width = width;
            wb.Height = height;

            wb.DocumentCompleted += (o, e) => Application.ExitThread();
            wb.Navigate(url);

            Application.Run(new Form { Visible = false });

            if (wb.DocumentTitle == "Navigation Canceled")
                Console.WriteLine("Natigated ERROR {0}", count);
            else
                Console.WriteLine("Natigated OK {0}", count);
        }
    }
    catch (Exception ex)
    {
        Console.WriteLine("Error: {0}", ex.ToString());
    }
}

Наличие формы предотвращает немедленной выход из цикла обработки сообщений.

4
  • "надо "крутить" через Application.Run" -- почему? исходник DoEvents() и Run() одинаковые, только в Run создается ApplicationContext.
    – Stack
    12 янв 2016 в 6:38
  • @Stack хм, спутал с реализацией из другого языка, видимо. Дело не в выбранном методе, а в наличии формы... 12 янв 2016 в 7:50
  • а код после Application.Run успевает выполниться после вызова Application.ExitThread()?
    – Stack
    12 янв 2016 в 8:10
  • @Stack метод Application.ExitThread не останавливает поток - он всего лишь выходит из Run/DoEvents. 12 янв 2016 в 8:18

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими пользовательским соглашением, политикой конфиденциальности и политикой о куки

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.