dark keeper:Dark Keeper是用于播客站点的开源简单Web解析器 源码

黑暗守护者 Dark Keeper是用于播客站点的开源简单Web解析器。 您也可以将其用于任何站点。 目标理念:解析每个播客情节的完整信息,例如编号,描述和下载链接。 产品特点 简单的网络蜘蛛现场行走 缓存所有下载的页面 解析页面中的任何信息 将已解析的数据导出到MongoDB 快速开始 $ mkvirtualenv keeper (keeper)$ pip install dark-keeper (keeper)$ cat app.py from dark_keeper import BaseParser , DarkKeeper , HttpClient , UrlsStorag