Data_Mining_Project 源码

Data_Mining_Project 网页刮板 描述: 该程序将刮取Metacritic网站上有关游戏的数据。 Metacritics游戏排名共有182页,每页包含从最高到最低Metacritic排名的100款游戏。 该程序将以HTML格式将每个页面保存在用户指定的输出路径(绝对或相对)中。 该web_scraper能够从每个游戏中抓取以下数据:链接,排名,标题,日期(发布),平台,元得分,用户得分和游戏摘要。 您可以选择要抓取的网页数量以及要抓取的数据。 用法: 要从命令行运行Web_Scraper,必须提供以下初始输入: python /web_scraper.py /output_path 用户还必须添加页面数和应抓取的类别。 参见下面所有可能命令的描述: 命令 例子 1 ** 每页包含100个游戏,按降序排列。 在这种情况下,将下载一页的综合评分者,返回排名最高的100