基于大数据的网络舆情监测大数据平台建设方案

Part 2
舆情大数据平台建设
系统介
网络舆情监测系统，是将搜索引擎技术应用在企业舆论情报服务的一次 创新。系统利用独有爬虫技术，能根据预定的监控关键词在15分钟以内发现 重点媒体、论坛、博客、微博等网站里的舆情信息，并对危机信息及时报警。 系统利用中文分词技术、自然语言处理技术、中文信息处理技术，对信息进 行垃圾过滤、去重、相似性聚类、情感分析、提取摘要、自动聚类等处理， 配合专业分析师生成详细的舆情分析报告。
我们很难通过人工的手段来及时、全面 地进行掌握、跟踪、分析和辅助决策
04带来的收益
可以提前预知事态发展状况，化被动为 主动，有益于政府形象
网络舆情监测的意义
1
2
互联网
3 4
当今社会，互联网已经成
为中国主流舆论场，占据
第一影响力位置 。
信誉危机
越来越多的政府和企业 危机来自于互联网 。
网络炒作
网络是社会信息的集散地， 也是社会舆论的放大器 。
对于网络舆情需要做什么
信息采集 定向抓取源、全网爬虫系统、搜索引擎结果
信息处理
垃圾信息过滤、智能去重、HTML内容提取、 即时通讯内容提取、快照存储
舆情分析
文章权重计算、传播轨迹分析、自动分类情感 分析、聚类/热点提取、爆发/倾向趋势分析
舆情展示 WEB客户界面、舆情预警、舆情分析报告
对于网络舆情需要做什么
人们的使用习惯
根据中国互联网络信息中心(CNNIC)的统计，截至2017年12月，我国网民规模达7.72亿，普 及率达到55.8%，超过全球平均水平（51.7%）4.1个百分点，超过亚洲平均水平（46.7%） 9.1个百分点。
政府部门的关注
中央领导人高度重视网络舆情工作，多次在会上重申建设良好畅通的网络舆情环境，网络舆 情已经成为政府倾听民生民意的重要渠道，同时也是人民群众发表言论的主要平台。
中石油福利房事 件
方法
相对纠纷和危机事件发生后的 设法解决，有效监测和评估所面临 的风险，并在事前采取适当的措施 进行规避，是政府、企业应借鉴的 发展之路
每
天
都 在
太多全国性乃至世界性影响事件，
发 生
均源自网络，来自一条普通网民
着
的一条帖子。
……
网络舆情现状
我咋就不知道呢？
舆情收集不全面
舆情收集不及 时 舆情分析不准确
4
危机预警
5
简洁实用
6
易于操作
功能一：数据抓取全、快、广
全：系统爬虫
自主研发专为舆情 系统设计的智能网 络爬虫系统，可以 实现高质量的抓取， 还支持对新浪微博、 腾讯微博、搜狐微 博等主要微博平台 信息的实时抓取。
快：覆盖15万站点的舆论来源
广：覆盖主流搜索引擎
新闻
平面媒体
论坛/社区
博客/Βιβλιοθήκη Baidu博
……
网络舆情的特点
01
广泛性
参与人员类型广泛 涉及地域范围广泛
突发性
03
基于网络双向传播 社会舆论导火索
主观性与非理性
02
社会情绪的原生态表达 网络谣言与负面情绪扩散
多元性
04
信息内容多元 传播途径与表达方式多元
意识形态与观点内容多元
网络舆情传播的特点
1
跨时空性：信息突破了空间的限制，实现了信息的跨时空传播
搜索引擎汇集了绝大部分的网络舆论。 借助搜索引擎，我们实现了更全面的 网络舆论监测。
功能二：数据筛选准
功能三：分析能力强
网络舆论的声量分析
舆论信息数量 新闻/平面媒体：转发量 论坛/社区：浏览量、回复量 博客/微博：浏览量、评论量
网络舆论的度量分析
关注度：品牌提及信息占行业的比率 影响力：提及媒体的价值占行业整体价 值的比例 美誉度（正负面）：品牌的正面或积极 舆论占自身舆论总量的比值 推荐率：媒体、网民在发表针对某品牌 的舆论时，明确对该品牌进行推荐的舆论 占自身舆论总量的比值
信息利用不便 利
网络舆情现状
什么是舆情？
舆情是民众关于现实社会中各种现象、问题所 表达的政治信念、态度、意见和情绪的总和。
2012
2013
2014
2015
2016
2017
信息传播越来越快
网络舆情现状
研发 背景
网络的飞速发展
随着因特网在全球范围内的飞速发展，网络媒体已被公认为是继报纸、广播、电视之后的 “第四媒体”网络成为反映社会舆情的主要载体之一。
2
群体极化性：信息的倾向性对受众的思想形成一定的支配性，形成群体极
化
3
强制互动性：信息由单向传播变成双向互动，公众由接受者变为参与者和生产者
4
及时性：即时编辑、及时发布、即时传播、即时互动、及时反馈
网络舆情现状
互联网 -- 治国理政新平台
十六届六中全会公报
通过互联网，拓宽社情民意表达 渠道，搭建快速广泛的沟通平台；建 立社会舆情汇集和分析机制，引导社 会热点、疏导公众情绪、搞好舆论监 督。
基于大数据的网络舆情监测大数据平台建设方案
Contents
目录
1. 建设背景和需求分析 2. 舆情大数据平台建设 3. 舆情大数据系统展示
Part 1
建设背景和需求分析
网络舆情的概念
传播互动
事件 影响力
网络 网民
情感互动
网络舆情是社会舆情的一种表现形 式，指在一定的网络空间中，各种 社会群体对自己关心或与自身利益 相关的热点事件或事物所表现出来 的具有一定影响力并带有倾向性的 认知、情绪、态度和意见的总和。
抓取范围 •自定义： url1、url2、url3… … •新闻、论坛、博客 、微博、平 面媒体 •Google、百度、搜狐搜狗、 网易有道、腾讯搜搜、雅虎 …
一千万条信息/日
协议解析
数据还原
抓
全网爬虫
取
引
海量站点列表
擎
搜索引擎结果
互联网
主要功能特色
1 数据抓取 2 数据筛选 3 检测纬度
分析能力
舆情监测需求分析
借助互联网+与大数 据技术进行舆情监测
01
01检测应用要求
对网络媒体反映出的舆论与民意实现全面有效 的采集、分析、研判和表达，通过有效危机预 警响应机制作出合理的引导与梳理
02
0舆2情面搜临集的困问难 题· 获取信息不准确 · 获取
信息不及时
04
03
03存在苦难
由特于性网（络自媒由体、中传舆播论快信、息传产播生面和广传等播）的，
切实把互联网建设好、利用好、管理好。使互联网成为转 播社会主义先进文化的新途径、公共文化服务的新平台、人们 健康精神文化生活的新空间。
- 胡锦涛2007年1月在中央政治局集体学习时讲话
要创造条件让人民批评政府、 监督政府 - 温家宝2010年3月5日在作政府 工作报告时说
网络舆情现状
三鹿奶粉事件
康师傅矿泉 水事件