一种大数据智能化语义分析系统

一种大数据智能化语义分析系统                     　　摘 要：本文基于scrapy构建分布式爬虫系统爬取今日头条、微博、微信公众号等新闻媒体文章以及相关评论，通过文本去重、文本过滤