lda舆情监测遇到的问题_程序开发

admin

2023-07-30 12:22:03

0次

1、问题一

LDA求出主题-词概率phi之后。可以知道每个主题下每个词的概率，之后怎么确定每篇文档的主题分布呢？

在 gibbs抽样稳定之后，统计每篇文档topic出现的频率就可以算出来。

2、问题二

每个主题下的词有可能是相同的，只是概率不同而已。统计时这个应该算在哪个主题下？

3、问题三

训练集--维基百科数据集是自己用爬虫爬，还是直接下载。

4、问题四

LDA模型构建完后，可以估计每篇文档的主题。但是之后要怎么知道当前舆论的热点呢？

5、问题五

Elasticsearch 是用来存取新闻和微博模块的数据，这样我可以设置一个表，表中的每一项（url-主题-发布时间-爬取时间-作者-摘要）这样搜索的时候就可以搜索出关于某个主题的所有url。

6、问题六

关于LDA的训练集的问题。这个训练集是自己爬取，然后分词得到的。

7、问题七

怎么将舆情信息展示出来。（按爬取文档的主题出现的概率排序）可以用图表表示出所有主题出现的的概率。柱状图。

解决完这七个问题，整个系统基本成型

博昂电气取得智能控制器底座专利... 国家知识产权局信息显示，上海博昂电气有限公司取得一项名为“一种智能控制器底座”的专利，授权公告号CN...

抵达目标小行星！天问二号最新消... 记者7月6日从国家航天局获悉，天问二号探测器历经约400天、行程约10亿千米的“追星”之旅，于近日与...

高考生填志愿前，都该读一遍De... 张无忌接任明教教主，是整部《倚天屠龙记》里最没道理的一次人事任命。他压根没想当英雄。刚从山谷里爬...

中国版星链两天两发！千帆星座在... 快科技7月6日消息，昨晚，海南国际商业航天发射场迎来长征八号甲运载火箭点火升空，本次任务以一箭二十星...

小米申请通信方法专利，能够适应... 国家知识产权局信息显示，北京小米移动软件有限公司申请一项名为“通信方法、终端、网络设备、通信系统、计...

马克龙将访问叙利亚，成为阿萨德... 当地时间7月5日，叙利亚国家通讯社（SANA）发布消息称，法国总统马克龙预计将访问叙利亚，讨论加强双...

国务院安委会等六部门联合发文，... 新华社北京7月6日电（记者黄韬铭）记者6日从应急管理部获悉，国务院安委会办公室联合中央政法委、最高...

极端天气、党派攻讦，美国在混乱... 【环球时报驻美国特约记者冯亚仁李准景宽】今年是美国独立250周年，系列庆祝活动在7月4日“独立...

澳官员加戏：找到对华优势了据法新社7月5日报道，澳大利亚近日借助橄榄球赛事推进“体育外交”，邀请多位太平洋岛国领导人访澳并举行...

不止余震！委专家警告另一场“看... 委内瑞拉强震发生已超过10天，搜救工作仍在持续进行，目前灾区不仅面临建筑物二次倒塌的危险，也开始出现...