突发公共卫生事件舆情数据可视化分析系统
技术框架python + flask web + mysql+ snownlp +echart
Python39_64 高版本jieba分词后舆情分析错误
我们从微博热搜获取数据
https://s.weibo.com/top/summary?cate=realtimehot
抖音热点
https://www.iesdouyin.com/share/billboard/?id=0
特殊需要注意的地方,在爬虫取完数据以后,根据标题来找到特定的字符,如突发,疫情,大白,口罩等字样,当标题中有这类数据的时候我们才把爬取的热搜数据写入的数据库中。
模块介绍
爬虫模块 (当我们启动网页以后,开启一个线程定时从微博热搜获取数据)
登录模块
可视化模块
不同阶段舆情分析图(折线图)
不同阶段舆情分析图(云词图)
分析模块
情感分析不同阶段模块 (不同阶段分析,我们使用爬虫的方式从微博热搜获取数据来进行分析可视化)
子模块不同阶段舆情分析折线图(我们根据每天的抓取数据来画图,分析每一天舆情值)。
子模块不同阶段舆情分析云词图(