rawler Rawler是一个在你网站的链接上爬行的工具.zip

rawler, Rawler是一个在你网站的链接上爬行的工具 rawlerRawler是一个 ruby 库,可以抓取网站并检查每个链接的状态代码。 用于查找死链接。Rawler只会分析包含内容类型'文本/html'的页面,但它会检查每个链接的响应代码。概要:rawler http://ex