新线程中的WebBrowser控件


84

我有一个列表Uri,我想“单击”以实现此目的,我正在尝试为每个Uri创建一个新的Web浏览器控件。我为每个Uri创建一个新线程。我遇到的问题是文档之前的线程结束已完全加载,所以我再也无法利用DocumentComplete事件了,该如何克服呢?

var item = new ParameterizedThreadStart(ClicIt.Click); 
var thread = new Thread(item) {Name = "ClickThread"}; 
thread.Start(uriItem);

public static void Click(object o)
{
    var url = ((UriItem)o);
    Console.WriteLine(@"Clicking: " + url.Link);
    var clicker = new WebBrowser { ScriptErrorsSuppressed = true };
    clicker.DocumentCompleted += BrowseComplete;
    if (String.IsNullOrEmpty(url.Link)) return;
    if (url.Link.Equals("about:blank")) return;
    if (!url.Link.StartsWith("http://") && !url.Link.StartsWith("https://"))
        url.Link = "http://" + url.Link;
    clicker.Navigate(url.Link);
}

Answers:


151

您必须创建一个用于泵送消息循环的STA线程。对于像WebBrowser这样的ActiveX组件,这是唯一的好客环境。否则,您将不会获得DocumentCompleted事件。一些示例代码:

private void runBrowserThread(Uri url) {
    var th = new Thread(() => {
        var br = new WebBrowser();
        br.DocumentCompleted += browser_DocumentCompleted;
        br.Navigate(url);
        Application.Run();
    });
    th.SetApartmentState(ApartmentState.STA);
    th.Start();
}

void browser_DocumentCompleted(object sender, WebBrowserDocumentCompletedEventArgs e) {
    var br = sender as WebBrowser;
    if (br.Url == e.Url) {
        Console.WriteLine("Natigated to {0}", e.Url);
        Application.ExitThread();   // Stops the thread
    }
}

8
是! 只需添加System.Windows.Forms。也拯救了我的一天。谢谢
zee 2012年

4
我正在尝试使此代码适合我的情况。我必须保持WebBrowser对象处于活动状态(以保存状态/ Cookie等),并Navigate()随时间执行多次调用。但是我不确定将Application.Run()调用放在哪里,因为它阻止了进一步的代码执行。有什么线索吗?
dotNET 2014年

您可以致电Application.Exit();让其Application.Run()返回。
Mike de Klerk

26

这是在非UI线程上组织消息循环,运行WebBrowser自动化等异步任务的方法。它用于async/await提供便利的线性代码流,并循环加载一组Web页面。该代码是一个现成的控制台应用程序,部分基于此出色的文章

相关答案:

using System;
using System.Threading;
using System.Threading.Tasks;
using System.Windows.Forms;

namespace ConsoleApplicationWebBrowser
{
    // by Noseratio - https://stackoverflow.com/users/1768303/noseratio
    class Program
    {
        // Entry Point of the console app
        static void Main(string[] args)
        {
            try
            {
                // download each page and dump the content
                var task = MessageLoopWorker.Run(DoWorkAsync,
                    "http://www.example.com", "http://www.example.net", "http://www.example.org");
                task.Wait();
                Console.WriteLine("DoWorkAsync completed.");
            }
            catch (Exception ex)
            {
                Console.WriteLine("DoWorkAsync failed: " + ex.Message);
            }

            Console.WriteLine("Press Enter to exit.");
            Console.ReadLine();
        }

        // navigate WebBrowser to the list of urls in a loop
        static async Task<object> DoWorkAsync(object[] args)
        {
            Console.WriteLine("Start working.");

            using (var wb = new WebBrowser())
            {
                wb.ScriptErrorsSuppressed = true;

                TaskCompletionSource<bool> tcs = null;
                WebBrowserDocumentCompletedEventHandler documentCompletedHandler = (s, e) =>
                    tcs.TrySetResult(true);

                // navigate to each URL in the list
                foreach (var url in args)
                {
                    tcs = new TaskCompletionSource<bool>();
                    wb.DocumentCompleted += documentCompletedHandler;
                    try
                    {
                        wb.Navigate(url.ToString());
                        // await for DocumentCompleted
                        await tcs.Task;
                    }
                    finally
                    {
                        wb.DocumentCompleted -= documentCompletedHandler;
                    }
                    // the DOM is ready
                    Console.WriteLine(url.ToString());
                    Console.WriteLine(wb.Document.Body.OuterHtml);
                }
            }

            Console.WriteLine("End working.");
            return null;
        }

    }

    // a helper class to start the message loop and execute an asynchronous task
    public static class MessageLoopWorker
    {
        public static async Task<object> Run(Func<object[], Task<object>> worker, params object[] args)
        {
            var tcs = new TaskCompletionSource<object>();

            var thread = new Thread(() =>
            {
                EventHandler idleHandler = null;

                idleHandler = async (s, e) =>
                {
                    // handle Application.Idle just once
                    Application.Idle -= idleHandler;

                    // return to the message loop
                    await Task.Yield();

                    // and continue asynchronously
                    // propogate the result or exception
                    try
                    {
                        var result = await worker(args);
                        tcs.SetResult(result);
                    }
                    catch (Exception ex)
                    {
                        tcs.SetException(ex);
                    }

                    // signal to exit the message loop
                    // Application.Run will exit at this point
                    Application.ExitThread();
                };

                // handle Application.Idle just once
                // to make sure we're inside the message loop
                // and SynchronizationContext has been correctly installed
                Application.Idle += idleHandler;
                Application.Run();
            });

            // set STA model for the new thread
            thread.SetApartmentState(ApartmentState.STA);

            // start the thread and await for the task
            thread.Start();
            try
            {
                return await tcs.Task;
            }
            finally
            {
                thread.Join();
            }
        }
    }
}

1
感谢您的精彩和翔实的回答!这正是我想要的。但是,您似乎(故意?)放错了Dispose()语句。
wodzu 2014年

@Paweł,您是对的,该代码甚至还没有编译:)我认为粘贴了错误的版本,现已修复。感谢您发现这一点。您可能需要检查一种更通用的方法:stackoverflow.com/a/22262976/1768303
noseratio 2014年

我尝试运行此代码,但是卡在了上task.Wait();。我做错了什么?
0014年

1
嗨,也许您可​​以帮我解决这个问题:stackoverflow.com/questions/41533997/…-该方法效果很好,但是如果Form在MessageLoopWorker之前实例化,它将停止工作。
Alex Netkachov

3

根据我过去的经验,Web浏览器不喜欢在主应用程序线程之外进行操作。

尝试使用httpwebrequests代替,您可以将它们设置为异步并为响应创建处理程序以知道响应何时成功:

如何异步使用httpwebrequest-net


我的问题是这个。单击的Uri需要登录该网站。WebRequest无法实现此目的。通过使用WebBrowser,它已经使用IE缓存,因此网站已登录。有没有解决的办法?链接涉及facebook。那么我可以登录Facebook并单击带有webwrequest的链接吗?
艺术W

@ArtW我知道这是一条旧评论,但是人们可以通过设置设置来解决该问题webRequest.Credentials = CredentialsCache.DefaultCredentials;
vapcguy

@vapcguy如果是API,则是,但是,如果它是具有HTML元素用于登录的网站,则将需要使用IE cookie或缓存,否则客户端将不知道如何处理Credentialsobject属性以及如何填充HTML。
ColinM

@ColinM整个页面所讨论的上下文是使用HttpWebRequest对象和C#.NET,而不是简单的HTML和要发布的表单元素,就像使用JavaScript / AJAX一样。但是无论如何,您都有接收器。对于登录,您应该使用Windows身份验证,并且IIS会自动进行处理。如果需要手动测试它们,则可以WindowsIdentity.GetCurrent().Name在实现模拟之后使用,并根据需要对AD搜索进行测试。不知道如何使用cookie和缓存。
vapcguy

@vapcguy问题正在讨论WebBrowser哪个将指示正在加载HTML页面,OP甚至表示WebRequest将无法实现他想要的功能,因此,如果网站希望登录时输入HTML,则设置该Credentials对象将无效。此外,正如OP所说,这些网站包括Facebook;Windows身份验证对此不起作用。
ColinM

0

一个简单的解决方案,可以同时运行多个WebBrowsers

  1. 创建一个新的Windows窗体应用程序
  2. 放置名为button1的按钮
  3. 放置名为textBox1的文本框
  4. 设置文本字段的属性:多行true和ScrollBars两者
  5. 编写以下button1单击处理程序:

    textBox1.Clear();
    textBox1.AppendText(DateTime.Now.ToString() + Environment.NewLine);
    int completed_count = 0;
    int count = 10;
    for (int i = 0; i < count; i++)
    {
        int tmp = i;
        this.BeginInvoke(new Action(() =>
        {
            var wb = new WebBrowser();
            wb.ScriptErrorsSuppressed = true;
            wb.DocumentCompleted += (cur_sender, cur_e) =>
            {
                var cur_wb = cur_sender as WebBrowser;
                if (cur_wb.Url == cur_e.Url)
                {
                    textBox1.AppendText("Task " + tmp + ", navigated to " + cur_e.Url + Environment.NewLine);
                    completed_count++;
                }
            };
            wb.Navigate("/programming/4269800/webbrowser-control-in-a-new-thread");
        }
        ));
    }
    
    while (completed_count != count)
    {
        Application.DoEvents();
        Thread.Sleep(10);
    }
    textBox1.AppendText("All completed" + Environment.NewLine);
    
By using our site, you acknowledge that you have read and understand our Cookie Policy and Privacy Policy.
Licensed under cc by-sa 3.0 with attribution required.