NewsData 新闻稿件趋势可视化与分析工具
新闻数据NewsData是一个致力于处理新闻文章和成绩单,以提供可视化和识别趋势的项目。该项目分为两部分:解析和分析处理管道与基于Flask的应用程序,运行WebUI和Web服务以访问存储在MongoDB中的数据。
支持的新闻来源
目前支持解析的新闻来源包括CNN成绩单等。
处理管道
处理管道负责解析和分析给定的文章和成绩单集合,并将结果数据按每日和每月粒度级别存储在MongoDB中。管道由多个独立运行的Python模块组成,通过RabbitMQ传递处理完成的消息,使模块之间的连接更加高效。
先决条件
在使用NewsData项目之前,需在news_data/settings.cfg
中配置RabbitMQ和MongoDB。
下载地址
用户评论