VC++网络爬虫
随着网络的迅速发展,万维网成为大量信息的载体,如何有效地提取并利用这些信息成为一个巨大的挑战。搜索引擎作为一个检索信息的工具成为用户访问万维网的入口和指南。网络爬虫是一个自动提取网页的程序,它为搜索引擎从Internet上下载网页,是搜索引擎的重要组成。作为搜索引擎的资源采集部分,网络爬虫的性能将直接影响到整个搜索引擎索引网页的数量、质量和更新周期。在上述背景下,本课题提出了基于VC++的网络爬虫的设计,实现原理为:应用socket编程技术和多线程技术在网络上抓取网页,使用正则表达式对抓取的网页内容进行分析,从中提取出用户所需的信息,使用宽度优先搜索算法访问页面中的所有链接,直至满足搜索的终止条件。涉及到Windows应用程序设计、正则表达式、HTTP协议、
下载地址
用户评论
感谢分享,正在学习
编译通过,就是感觉代码不值这个价呀,略心疼。
已通过修改代码,定制,下载多个html。
还不错,适合入门 编译通过了,不过稍微有点瑕疵,需要完善
编译能通过,还在研究中
编译通过,可以用,但试着使用后感觉功能还有所欠缺,URL的过滤内容不怎么准确。
还不错,就是分数贵了点,下的时候有点心疼。代码注释很清晰,感谢分享
不错,还行吧,适合新手