谷尼网络舆情监控系统技术白皮书

第一篇：谷尼网络舆情监控系统技术白皮书

谷尼网络舆情监控系统

技术白皮书

(简版)

谷尼国际软件（北京）有限公司

目录 2 3 4 系统概述........................................................................................................................................1 系统结构........................................................................................................................................1 系统特点........................................................................................................................................2 功能描述........................................................................................................................................3 4.1 4.2 4.3 4.4 4.5 4.6 4.7 5 热点话题、敏感话题识别...................................................................................................3 舆情主题跟踪.......................................................................................................................3 自动摘要...............................................................................................................................4 舆情趋势分析.......................................................................................................................4 突发事件分析.......................................................................................................................4 舆情报警系统.......................................................................................................................5 舆情统计报告.......................................................................................................................5

运行环境........................................................................................................................................5

谷尼国际软件（北京）有限公司制 系统概述

网络舆情形成迅速，对社会影响巨大，不仅需要各级党政干部密切关注，也需要社会各界高度重视。该方案可应用在政府的新闻监管、舆论监督等部门。

网络舆情监控系统是一套利用搜索引擎技术、文本处理技术、知识管理方法，通过对互联网海量信息自动获取、提取、分类、聚类、主题监测、专题聚焦，实现用户对网络舆情监测和热点事件专题追踪等需求，形成舆情决策库、舆情简报等分析结果，为客户全面掌握舆情动态，做出正确舆论引导提供分析依据。

谷尼网络舆情监控系统是以信息采集技术为核心，应用信息采集技术、内容管理技术、知识管理技术、信息分类技术，实现网络舆情监测和新闻热点追踪、新闻监管等功能需求。为客户全面掌握群众思想动态，做出正确舆论引导，提供分析依据。系统工作流程如下: • 信息采集：互联网信息实时监测、采集、内容提取及排重；

• 信息处理：对抓取的内容进行自动分类聚类、主题检测、专题聚焦等； • 信息服务：将采集并分析整理后的信息直接为用户或为用户辅助编辑提供信息服务，如自动形成舆情信息简报、追踪已发现的舆论焦点等。系统结构

总体来说，网络舆情监控系统软件的结构如下：

谷尼国际软件（北京）有限公司制 系统特点

该项目与国内外互联网舆情监控系统或类似功能的系统比较，具有自己显著的技术特点，如允许用户定制舆情监控的范围、方式等，具体如下： • 支持网页编码自动识别 • 支持URL去重识别

• 支持正文自动识别抽取，无须标签配置

谷尼国际软件（北京）有限公司制

• 支持分页采集 • 可设置采集频率 • 支持分布式部署 • 强大的信息采集功能 • 智能化的中文信息处理

• 全面的敏感信息分布式检索系统 • 分类、聚类等中文智能处理技术广泛采用 • 实时增量备份原则

• 合理的模块化结构及方便的分类监控 • 灵活的调度算法

• 支持新闻、博客、论坛、贴吧的采集监控 • 基于内容相似性去重识别 • 支持互联网关键词搜索采集入库 • 支持敏感词过滤提取 • 支持热点发现 • 支持网页快照 功能描述

4.1 热点话题、敏感话题识别

网络舆情监控系统可以根据新闻出处权威度、发言时间密集程度等参数，识别出给定时间段内的热门话题。利用内容主题词组和回贴数进行综合语义分析，识别敏感话题。

4.2 舆情主题跟踪

网络舆情监控系统分析新发表文章、贴子的话题是否与已有主题相同。

是根据文档内容间的相关程度进行分组归并。聚类不需要类别及相关训练样本。聚类可以发现当前舆论焦点,或者相关文档的查找.谷尼国际软件（北京）有限公司制

网络舆情监控系统通过对同一个阶段搜索到的大量信息进行聚类，我们可以很方便地发现当前关于什么类别的文章数量更多，那些信息之间的关系更紧密，这样我们可以很直观地了解到当前舆论的焦点，以及各个舆论点之间的联系紧密程度。

4.3 自动摘要

网络舆情监控系统对各类主题，各类倾向能够形成自动摘要。

信息自动摘要的中心思想是让用户在查看搜索结果时候，无需点击进入每一个搜索结果去了解具体内容，而自动在搜索结果条目下显示摘要信息。这些“摘要”帮助用户迅速了解搜索结果的主要内容，提高了工作效率。

4.4 舆情趋势分析

分析某个主题在不同的时间段内，人们所关注的程度。

4.5 突发事件分析

网络舆情监控系统对突发事件进行跨时间、跨空间综合分析，获知事件发生的全貌并预测事件发展的趋势。

谷尼国际软件（北京）有限公司制

4.6 舆情报警系统

网络舆情监控系统对突发事件、涉及内容安全的敏感话题及时发现并报警。

4.7 舆情统计报告

网络舆情监控系统根据舆情分析引擎处理后生成报告，用户可通过浏览器浏览，提供信息检索功能，根据指定条件对热点话题、倾向性进行查询，并浏览信息的具体内容，提供决策支持。运行环境

操作系统:Microsoft Windows XP/NT/2000/2003/ 数据库为:SQL2005/MYSQL/ORACLE 服 务 器:CPU3.2G/内存2G/硬盘40G以上 带宽要求:2M独享以上

服务器数量:2台(1台采集监控、1台 数据库服务器)应用规模较大，可以采用多服务器集群的方式

谷尼国际软件（北京）有限公司制

第二篇：谷尼Goonie互联网舆情监控系统技术白皮

Goonie互联网舆情监控系统

技术白皮书

谷尼国际软件（北京）有限公司

二〇一〇年八月

目录 2 3 4 5 系统概述........................................................................................................................................1 系统结构........................................................................................................................................1 系统特点........................................................................................................................................2 性能指标........................................................................................................................................3 功能描述........................................................................................................................................4 5.1 5.2 5.3 5.4 5.5 5.6 5.7 6 7 热点话题、敏感话题识别...................................................................................................4 舆情主题跟踪.......................................................................................................................4 自动摘要...............................................................................................................................4 舆情趋势分析.......................................................................................................................5 突发事件分析.......................................................................................................................6 舆情报警系统.......................................................................................................................6 舆情统计报告.......................................................................................................................6

运行环境........................................................................................................................................6 系统案例........................................................................................................................................7

谷尼国际软件（北京）有限公司制 系统概述

网络舆情形成迅速，对社会影响巨大，不仅需要各级党政干部密切关注，也需要社会各界高度重视。该方案可应用在政府的新闻监管、舆论监督等部门。

互联网舆情监控系统是一套利用搜索引擎技术、文本处理技术、知识管理方法，通过对互联网海量信息自动获取、提取、分类、聚类、主题监测、专题聚焦，实现用户对网络舆情监测和热点事件专题追踪等需求，形成舆情决策库、舆情简报等分析结果，为客户全面掌握舆情动态，做出正确舆论引导提供分析依据。

谷尼互联网舆情监控是以信息采集技术为核心，应用信息采集技术、内容管理技术、知识管理技术、信息分类技术，实现网络舆情监测和新闻热点追踪、新闻监管等功能需求。为客户全面掌握群众思想动态，做出正确舆论引导，提供分析依据。系统工作流程如下: • 信息采集：互联网信息实时监测、采集、内容提取及排重；

• 信息处理：对抓取的内容进行自动分类聚类、主题检测、专题聚焦等； • 信息服务：将采集并分析整理后的信息直接为用户或为用户辅助编辑提供信息服务，如自动形成舆情信息简报、追踪已发现的舆论焦点等。系统结构

总体来说，该监控管理软件的结构和特点如下：

谷尼国际软件（北京）有限公司制 系统特点

该项目与国内外互联网舆情监控系统或类似功能的系统比较，具有自己显著的技术特点，如允许用户定制舆情监控的范围、方式等，具体如下： • 支持网页编码自动识别 • 支持URL去重识别

• 支持正文自动识别抽取，无须标签配置

谷尼国际软件（北京）有限公司制

• 支持分页采集 • 可设置采集频率 • 支持分布式部署 • 强大的信息采集功能 • 智能化的中文信息处理

• 全面的敏感信息分布式检索系统 • 分类、聚类等中文智能处理技术广泛采用 • 实时增量备份原则

• 合理的模块化结构及方便的分类监控 • 灵活的调度算法

• 支持新闻、博客、论坛、贴吧的采集监控 • 基于内容相似性去重识别 • 支持互联网关键词搜索采集入库 • 支持敏感词过滤提取 • 支持热点发现 • 支持网页快照 性能指标

• 稳定性强：在机器不断电的情况下，采集系统能7×24不间断持续运行，不出现死机、无故重启、资源耗尽等问题；无需人工监控。

• 性能优越：在普通网络带宽情况下，单机PC的采集能力达到30页面/秒，网络带宽高的情况下可达到60-100页面/秒。• 效率优良：采集器所耗费的带宽的利用率超过80％。• 抽取精确：正文的抽取准确率98%，误抽率不到1%。• CPU和内存的占有率不超过50％。

谷尼国际软件（北京）有限公司制 功能描述

5.1 热点话题、敏感话题识别

可以根据新闻出处权威度、发言时间密集程度等参数，识别出给定时间段内的热门话题。利用内容主题词组和回贴数进行综合语义分析，识别敏感话题。

5.2 舆情主题跟踪

分析新发表文章、贴子的话题是否与已有主题相同。

是根据文档内容间的相关程度进行分组归并。聚类不需要类别及相关训练样本。聚类可以发现当前舆论焦点,或者相关文档的查找.通过对同一个阶段搜索到的大量信息进行聚类，我们可以很方便地发现当前关于什么类别的文章数量更多，那些信息之间的关系更紧密，这样我们可以很直观地了解到当前舆论的焦点，以及各个舆论点之间的联系紧密程度。

5.3 自动摘要

对各类主题，各类倾向能够形成自动摘要。

信息自动摘要的中心思想是让用户在查看搜索结果时候，无需点击进入每一个谷尼国际软件（北京）有限公司制

搜索结果去了解具体内容，而自动在搜索结果条目下显示摘要信息。这些“摘要”帮助用户迅速了解搜索结果的主要内容，提高了工作效率。

5.4 舆情趋势分析

分析某个主题在不同的时间段内，人们所关注的程度。

谷尼国际软件（北京）有限公司制

5.5 突发事件分析

对突发事件进行跨时间、跨空间综合分析，获知事件发生的全貌并预测事件发展的趋势。

5.6 舆情报警系统

对突发事件、涉及内容安全的敏感话题及时发现并报警。

5.7 舆情统计报告

根据舆情分析引擎处理后生成报告，用户可通过浏览器浏览，提供信息检索功能，根据指定条件对热点话题、倾向性进行查询，并浏览信息的具体内容，提供决策支持。运行环境

操作系统:Microsoft Windows XP/NT/2000/2003/ 数据库为:SQL2005/2000 谷尼国际软件（北京）有限公司制

服 务 器:CPU3.2G/内存2G/硬盘40G以上 带宽要求:2M独享以上

服务器数量:2台(1台采集监控、1台 数据库服务器)应用规模较大，可以采用多服务器集群的方式 系统案例

国家部委成功案例 国家知识产权局 国家邮政局 国家农业部

总后勤部 空军司令部......地方政府成功案例 衡水市委宣传部 沈阳市委

郴州市委宣传部 淮安市委宣传部 河南永城市委

河南永城市公安局 石家庄市政府 四川人民政府 福建省教育厅 31个省市邮政局......谷尼国际软件（北京）有限公司制

知名企业成功案例 中国第一汽车集团 中石化西北油田分公司 中石油华北油田分公司 蒙牛乳业（北京）有限公司 河南绿能高科有限公司 中国网通集团河南公司 中国联通北京分公司

山西阳泉煤业集团有限责任公司 北京图书大厦有限公司......其它成功案例

人民邮电报业集团－中国信息产业网 深圳日报报业集团 深圳新闻网 甘肃日报报业集团 每日甘肃网 检察日报社－正义网 丽水日报社－丽水网 南京大学 河北师范大学

第三篇：Goonie网络舆情监控分析系统





Goonie网络舆情监控分析系统

1、既支持指定网站新闻、博客、论坛监测，也支持整个互联网的舆情监控。

2、智能识别非法网络信息，帮助您进行网络扫黄、打非、打假。

3、自动发现负面报道、热点新闻事件、热点论坛贴子。

系统背景

随着互联网的快速发展，网络媒体作为一种新的信息传播形式，已深入人们的日常生活。网友言论活跃已达到前所未有的程度，不论是国内还是国际重大事件，都能马上形成网上舆论，通过这种网络来表达观点、传播思想，进而产生巨大的舆论压力，达到任何部门、机构都无法忽视的地步。可以说，互联网已成为思想文化信息的集散地和社会舆论的放大器。

网络舆情是通过互联网传播的公众对现实生活中某些热点、焦点问题所持的有较强影响力、倾向性的言论和观点，主要通过BBS论坛、博客、新闻跟贴、转贴等实现并加以强化。当今，信息传播与意见交互空前迅捷，网络舆论的表达诉求也日益多元。如果引导不善，负面的网络舆情将对社会公共安全形成较大威胁。对相关政府部门来说，如何加强对网络舆论的及时监测、有效引导，以及对网络舆论危机的积极化解，对维护社会稳定、促进国家发展具有重要的现实意义，也是创建和谐社会的应有内涵。

系统概述

Goonie网络舆情监控分析系统依托自主研发的搜索引擎技术和文本挖掘技术，通过网页内容的自动采集处理、敏感词过滤、智能聚类分类、主题检测、专题聚焦、统计分析，实现各单位对自己相关网络舆情监督管理的需要，最终形成舆情简报、舆情专报、分析报告、移动快报，为决策层全面掌握舆情动态，做出正确舆论引导，提供分析依据。

系统结构

功能特点 ·自定义URL来源及采集频率

Goonie网络舆情监控分析系统用户可以设定采集的栏目、URL、更新时间、扫描间隔等，系统的扫描间隔最小可以设置成1分钟，即每隔一分钟，系统将自动扫描目标信息源，以便及时发现目标信息源的最新变化，并以最快的速度采集到本地。

·支持多种网页格式

Goonie网络舆情监控分析系统可以采集常见的静态网页（HTML/HTM/SHTML）和动态网页（ASP/PHP/JSP），还可以采集网页中包含的图片信息。

·支持多种字符集编码

Goonie网络舆情监控分析系统采集子系统能够自动识别多种字符集编码，包括中文、英文、中文简体、中文繁体等，并可以统一转换为GBK编码格式。

·支持整个互联网采集

Goonie互联网舆情监控系统元搜索模式是以国内知名互联网搜索引擎的结果为基础并利用Goonie采集器直接面向互联网定制内容进行直接采集，用户只需要输入搜索关键词就可以了。

·支持内容抽取识别

Goonie网络舆情监控分析系统可对网页进行内容分析和过滤，自动去除广告、版权、栏目等无用信息，精确获取目标内容主体。

·基于内容相似性去重

Goonie网络舆情监控分析系统通过内容相关识别技术自动判别分类中文章的关系，如果发现描述相同事件的文章自动去除重复部分。

功能描述

1、热点话题、敏感话题识别

网络舆情监控分析系统可以根据新闻出处权威度、发言时间密集程度等参数，识别出给定时间段内的热门话题。利用内容主题词组和回贴数进行综合语义分析，识别敏感话题。

2、舆情主题跟踪

网络舆情监控分析系统分析新发表文章、贴子的话题是否与已有主题相同。

3、自动摘要

Goonie网络舆情监控分析系统对各类主题，各类倾向能够形成自动摘要。

4、舆情趋势分析

Goonie网络舆情监控系统分析某个主题在不同的时间段内，人们所关注的程度。

5、突发事件分析

Goonie网络舆情监控分析系统对突发事件进行跨时间、跨空间综合分析，获知事件发生的全貌并预测事件发展的趋势。

6、舆情报警系统

Goonie网络舆情监控分析系统对突发事件、涉及内容安全的敏感话题及时发现并报警。

7、舆情统计报告

Goonie网络舆情监控分析系统根据舆情分析引擎处理后生成报告，用户可通过浏览器浏览，提供信息检索功能，根据指定条件对热点话题、倾向性进行查询，并浏览信息的具体内容，提供决策支持。

第四篇：什么是网络舆情监控

什么是网络舆情监控？

至尚国际互联网集团回答：

从社会角度来说，网络舆情监控就是对社会热点讨论进行观点引导，一般向维持社会安定的为目的进行引导，避免过激言论。

从商业角度来说，网络舆情监控是一种危机公关的，具有意外性、聚焦性、破坏性和紧迫性等特点，由于网络信息具有传播速度快、传播范围广的特点，任何小问题都有可能放大成为大问题，并在短时间内变成舆论热点。

现代企业在日常管理经营过程中树立自身品牌，就必须要时刻关注网络口碑的变化，防止企业经营中一些细小问题或负面报道扩展为大问题或全国新闻，及时消除负面报道，防止事件扩大。

而网络舆情监控，是通过网络信息采集技术，信息智能处理技术，对互联网海量信息进行抓取、分类、检测，实现用户的网络舆情监测和新闻专题追踪等信息需求，为客户全面掌握群众思想动态，做出正确舆论引导，提供分析依据。必要时，针对网络负面信息对外进行发布会澄清等。

第五篇：网络舆情监控实施方案

关于加强网络舆情管理工作暂行实施方案

为进一步加强网络舆情监测，防止不良信息对政府的侵害，有效防范网络舆情事件发生，掌握网络舆论主动权，加强对网络舆情的预警防范和监测引导，形成积极向上的主流舆论，营造良好的舆论环境，促进和保障政府网络信息服务健康、有序发展，现结合我省实际，制定以下实施方案。

一、工作目标

加强网上舆情监控，及时掌握舆情动态，坚决封堵、删除各种有害信息，及时掌握互联网等网络媒体对全省的工作动态、干部队伍建设、社情民意等方面信息的报道及评论，加强正面引导，释疑解惑，化解矛盾，消除不良影响，树立我省良好的对外形象。

二、程序及工作要求

（一）网络舆情监控的基本程序为：

收集信息—核实信息—报送信息—处置舆情。

（二）工作要求

1、监测对象及监测内容在较经常出现涉及我省相关舆情信息的主要门户网站、政府网站、新闻网站和网络论坛等对涉及党和政府的网络信息进行查询、收集，对新出现的网络信息及时下载，对不良舆情进行监测，做好记录、梳理等工作，及时上报并与主管领导沟通，正确处置。

2、监测方法，采用7*24小时分工轮值负责制，利用相关软件与人工利用百度、google等搜索引擎对舆情进行搜索两种方式，对人民网及主要门户网站、政府网站、新闻网站网友留言、网上论坛、博客、即时通讯等互动性栏目，通过网页逐条浏览或者通过关键字词全网搜索等形式，收集相关舆情信息和留言，并将收集到的网络信息材料及时报送。上报内容包括网络实名、舆情和网友留言大概内容等。政府网站管理人员要加强网站信息监控和管理，特别是做好网贴、留言等内容的过滤工作，杜绝不良信息的出现。同时还可采用双管齐下的方法，聘请的专业监测机构以周报的形式，定期向省信息化管理中心报送网络舆情信息；遇突发事件及重大舆情发生，各监测机构应于第一时间报告，省信息化管理中心以特报的形式，在4小时内，向政府信息公开处报送网络舆情信息。

4、网络舆情研判，按照“谁主管、谁负责”的原则将监测到的舆情信息进行分转交办，按照“快速反应、确认事实、妥善处理”的原则及时对网络舆情进行分析、判断、评估，准确查找舆情信息产生的原因，认真核实舆情反映的问题，对舆情走向作出正确的判断，对舆情可能产生的影响进行客观、全面评估。一般舆情，协调涉及单位作出情况说明；重大舆情由办公厅信息公开处责成相关单位作出情况说明和回复意见，一时难以解决的要在回复中说明情况，对于把握不准的问题，须报主管领导审定。

5、网络舆情协调，得到舆情研判反馈后，网络舆情协调组迅速组织网评员了解真相，以发帖、跟帖、撰写评论文章、介绍事实真相等不同形式进行回复，积极释疑解惑，化解矛盾，消除影响，矫正视听，积极营造良好的舆论氛围。回复重在讲事实、摆道理，以理服人，同时要注意用语艺术，做到态度诚恳，讲理不失礼。一般舆情和留言的回复内容由主管领导审核后发布，涉及到全省重大事项、主要领导及干部任用的舆情回复文章须经办公厅信息公开处审核后发布。

重大舆情处置后，要密切关注事件进展情况，防范负面舆情出现反复。