c#网页采集自动入库程序

功能:1 自动抓取网页链接2 对网页链接进行查重、排序、筛选,鼠标+shift多选,鼠标+alt多个删除3 读入链接文件对其自动另存4 对文件按照内容源代码进行截取后自动入库5 自动判断下一页链接来自动导入链接6 在网页中利用正则表达式来进行特殊数据的抓取7 批量生成链接8 网页载入完毕后始终在本窗体打开,不会弹出新窗口,对需要登录的网页抓取很有用。