使用HttpClient库的爬虫程序

使用HttpClient库的爬虫程序_第1张图片

使用HttpClient库的爬虫程序,该爬虫使用C#来抓取内容。

using System;
using System.Net.Http;
using System.Threading.Tasks;
​
namespace CrawlerProgram
{
    class Program
    {
        static void Main(string[] args)
        {
            // 创建HttpClient对象
            using (HttpClient client = new HttpClient())
            {
                // 设置
                client.DefaultRequestHeaders.AddProxy(new Uri(""));
                client.DefaultRequestHeaders.AddProxy(new Uri(""));
​
                // 发送请求
                string result = await client.GetStringAsync("");
​
                // 输出结果
                Console.WriteLine(result);
            }
        }
    }
}

这个程序首先创建了一个HttpClient对象,。然后,它发送了一个GET请求,并获取了响应。最后,它输出了响应的内容。

你可能感兴趣的:(爬虫)