HttpAnalyzer
一个用于抓取http页面内容的小工具。基于配置对页面做分析和处理,针对不同的情况,修改配置文件即可。写这个工具的初衷在于很多时候需要抓取页面的图片,但是针对不同的网站需要重新开发。为了便于抓取,而不用每次重新开发才写了这个东西。这个工具目前只适合简单页面的内容抓取,对于基于AJAX来显示页面内容的结构完全不支持,因为没有内嵌JS引擎,未来可能会考虑使用V8来尝试性的优化这个项目。我不太喜欢写注释,但我对代码的书写比较严谨。因为这个项目只写了3天,应该会有一些BUG,见谅。如果有问题可以留言,很乐意回复,大家交流学习。严正声明,请不要将此代码用于任何商业目的的项目。
用户评论