首页 解决方案 舆情监测技术手段主要包括哪些?

舆情监测技术手段主要包括哪些?

在当下,舆情监测已被广泛应用于各行各业的各主体单位,从企业到党政机关、高校,再到公众人物,相关事业单位等,均意识到了舆情监测工作的重要性。

在当下,舆情监测已被广泛应用于各行各业的各主体单位,从企业到党政机关、高校,再到公众人物,相关事业单位等,均意识到了舆情监测工作的重要性。因此市场上相关的舆情监测软件产品也是层出不穷,可供用户选择。

从技术角度来看,网络舆情监测其实是众多技术结合的成果。一般来说,舆情监测技术手段主要包括:

一、网络舆情采集

在信息采集步骤中,主要包括网络爬虫(We-bCrawler)和网页清洗(WebPageCleaning)等技术。

网络爬虫是一个按照一定规则自动抓取网络信息的程序,又称为网络蜘蛛(WebSpider)。网络爬虫分为三类:通用爬虫(GeneralPurposeWebCrawler) ,面向主题爬虫(FocusCrawlerorTopicalCrawler) ,面向DeepWeb爬虫(DeepWebCrawler)。考虑到网络舆情监测一般是面向行业监测,倾向于使用面向主题爬虫。

网页清洗就是从网页中过滤掉“噪声”数据,提取出网页中有价值的信息内容。网页清洗分析方法主要分为三类:基于树结构分析方法,基于Web挖掘方法,基于正则表达式方法。基于树结构分析方法应用最广,开源软件Htmlparse是比较有代表性的工具,缺点是高度依赖每个网站网页的结构。

二、舆情自动分类

网络舆情分类是将收集的舆情进行自动分类,是整理和发现舆情的关键步骤,主要运用到自然语言处理中的文本分类(TextCategorization)和文本聚类(TextClusters)等技术。

三、话题识别与跟踪

话题识别与跟踪(TopicDetectionandTracking)是对网络舆情聚类分析后,通过算法找出热点问题,并通过算法跟踪话题发展过程,是网络舆情监测中的核心技术。

四、文本情感分析

文本情感分析(又称文本倾向性或意见挖掘(OpinionMining)),是对带有情感色彩的主观性文本进行分析、处理、归纳和推理的过程。文本情感分析是自然语言处理技术中新兴的研究课题,具有很大的研究价值和应用价值,一般来说,它分为三个主要研究任务:情感信息抽取、情感信息分类、情感信息的检索与归纳。

免责声明:文章内容不代表本站立场,本站不对其内容的真实性、完整性、准确性给予任何担保、暗示和承诺,仅供读者参考,文章版权归原作者所有。如本文内容影响到您的合法权益(内容、图片等),请及时联系本站,我们会及时删除处理。

作者: suifengmianlai

为您推荐

生产制造 | 数控仿真保证“安全” 之 NCSIMUL四轴机床搭建

NCSIMUL 通过上一期对三轴机床搭建的讲解和演示,想必大家已经能够搭建自己专属的三轴机床。

质量管理 | 海克斯康 Q-DAS®与SAP QM的交互应用方案

SAP(System Applications and Product) 软件在企业的部署着眼于中央业务流程的优化。

新能源汽车供应链强力转型,数字化供应链系统订单管理数字化助力企业降本增效

当前,全球新能源汽车产业发展驶入快车道,新产品新技术加快研发运用,技术创新带动产业持续升级。

进度猫甘特图:项目管理中的任务分解工具

项目管理中是将大的项目目标划分为各个小阶段任务,WBS就是化繁为简,将负责非项目拆分为简单的任务,它可让事情依照一定规则或关系,通过一层一层来分解,这样要做的任务可以变为小目标。

查看流程审批历史记录解决方案

作者:黄鹏 审校:李达 适用版本:TC11 用户可以在TC中看到整个流程的历史记录,包括驳回,审批,编制的操作,这样可以方便我们查看哪些人参与了这个流程。

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注

返回顶部