C产品在市场上有哪些独特优势？

本文共计775个文字，预计阅读时间需要4分钟。

上次做了个帮公司女儿做的爬虫，精度不是很高。这次公司项目需要，我做了调整，功能增加了网站图片采集、下载等。思路是：首先获取网页，然后解析网页内容，提取图片链接，最后下载图片。

上次做了一个帮公司妹子做了爬虫，不是很精致，这次公司项目里要用到，于是有做了一番修改，功能添加了网址图片采集，下载，线程处理界面网址图片下载等。

说说思路：首相获取初始网址的所有内容 在初始网址采集图片 去初始网址采集链接 把采集到的链接放入队列 继续采集图片，然后继续采集链接，无限循环

还是上图片大家看一下，

处理网页内容抓取跟网页网址爬取都做了改进，下面还是大家来看看代码，有不足之处，还请之处!

网页内容抓取HtmlCodeRequest,

网页网址爬取GetHttpLinks，用正则去筛选html中的Links

图片抓取GetHtmlImageUrlList，用正则去筛选html中的Img

都写进了一个封装类里面 HttpHelper

/// <summary> /// 取得HTML中所有图片的 URL。