基于网络爬虫的舆情分析预警系统设计

针对高校对校园论坛及相关网站上的网络舆情无法实现有效监控、分析及预警等问题,文中研究和设计了一种基于爬虫网络的舆情分析预警系统。该系统首先利用网络爬虫技术对相关网站上感兴趣的原始数据进行爬取,然后通过预处理模块对获取到的数据进行去重、消噪及特征提取,最后利用数据分析的方法实现网络舆情的分析与预警。系统的各项测试结果验证了该系统的可行性,同时表明该系统不仅能够实现预期的基本功能,且可以对获取到的舆情资源进行合理分类及情感色彩分析,辅助管理者作出更优的决策。