.NET爬虫获取拼多多商品价格

 

首先 定义一个获取html页面的方法
 

      public string GetPrice(string url)
        {
            WebClient web = new WebClient();
            byte[] buffer = web.DownloadData(url);
            return Encoding.UTF8.GetString(buffer);
        }

然后把我们要获取的页面传进去 

比如我们目标页面是：https://mobile.yangkeduo.com/goods.html?goods_id=3029111605

 

接着在浏览器F12 找到前端代码

编写正则表达式匹配

  string htmlcode = GetPrice("https://mobile.yangkeduo.com/goods.html?goods_id=3029111605");
            Regex reg = new Regex(".*");
            MatchCollection ms = reg.Matches(htmlcode);
            foreach (Match m in ms)
            {
                Response.Write(m.ToString() + "
");
            }

运行结果：

同理 可以编写对应的正则去获取商品的标题，图片等其他信息