jsoup抓取某网站关键字查询列表的所有文章并生成文档
前两天因为一个业务需求,需要从某网站爬取某个关键字搜索结果的所有文章,于是加班做了一个基于jsoup的爬虫程序,可以将特定关键字的搜索结果里所有的文章爬取到,并以文件的形式保存到本地,支持分页爬取。完整项目代码,有需要的可以下载,共同研究。
下载地址
用户评论