当前位置:
文档之家› 互联网大数据智能监测系统建设方案
互联网大数据智能监测系统建设方案
•
•
舆情分析引擎
舆情服务平台
技术支撑:
•
• •
• • • • • •
WEB挖掘技术
搜索引擎技术 自然语言处理技术
“及时发现”是舆情监测系统的核心功能,效果是舆情监测系统的灵魂 “没有针对性,就没有实用性”。 定向采集和全网搜索相辅相成,经纬交织、立性和准确性。 算法解决不了所有问题,重视“与我相关”的舆情知识工程体系。 管线架构设计,可根据项目规模集中或者分布式部署,优化硬件和网络资源配置。
浓缩海量信息抵抗“数据爆炸”
– 随着全媒体时代的到来,网民习惯于在微博、微信,移动APP、论坛、SNS等平台上发表 意见,从舆情产品服务的角度看,浓缩海量信息,抵抗“数据爆炸”已成基本要求。在信 息广度上最大可能去抓取数据信息。同时掌握数据抓取能力与舆情分析解读能力将是未来 舆情分析的必备技能。
设计理念: • 舆情知识库
17
系统功能概览
舆情采集系统
全网搜索 定向采集 境内境外
内嵌脚本引擎 模拟浏览器登录 论坛跟帖结构化 点击数/回复数更新
真正意义上的7*24小时无人 值守信息采集 可视化 采集配置
新闻/论坛/微博/电子报/贴吧/博客/图片/视频 /QQ/微信/搜索引擎/境外网站/多语言
12
正确认识网络舆情监测系统
效果是检验系统的唯一标准!
舆情系统不是万能的 舆情系统不是“通用设备”,没有针对性就没有实 用性 服务!服务!服务! 系统功能再强大,也需要人工优化配置才能发挥最 佳效果,配套的工作机制很重要
13
舆情监测系统的应用成果
预警:一网打尽、一目了然
分析:定性定量的统计数据
10
第二部分 摘 要
大数据时代如何科学部署实施舆情监测系统
正确认识网络舆情监测系统 舆情监测系统应该具备的主要功能
运行环境
11
正确认识网络舆情监测系统
高级层次比效果
全面、及时、准确、实用、易用
功能都一样 效果差异大
初级层次讲功能
少数民族语言 境外信息(facebook、twitter) QQ群、微信 舆情数据中心 各种概念… …
18
系统功能概览
舆情分析引擎
小提示
独有的舆情研判技术
内置舆情知识工程
主贴 实时舆情预警 热点话题、敏感话题识别 自动负面研判 自动摘要、自动提取要素和关键词 热点焦点转载分析 点击数/回复数和跟帖实时更新
回帖
19
系统功能概览
监测结果通知的多样性,支持服务的高度可达性:电脑、手机客户端、移动设备、短 信预警、邮件通知、工作流提醒…
• 新闻 • 论坛 • 报纸(电子报)
• 图片
• 视频
• 微博
• 贴吧
• QQ、微信
• SNS社区 • 搜索引擎
• 博客
网络舆情传播特点:直接、隐蔽、互动、多元、快速、破坏、群体极化
8
舆情工作中遇到的问题
领导都知道了,我咋就还不 知道呢?
不顺畅
事前监测不全面,不及时
事中反馈 协同工作 事后分析无依据 不准确
管理:自动报告、舆情导控…
14
舆情监测系统运行环境服务运行支持某舆情云数据平台和用 户端私有舆情平台相结合模式,降低用户使用门槛和节省用户硬件 设施网络资源成本。
15
第三部分 摘 要
某网络舆情监测系统的功能
系统架构 系统功能概览
16
系统架构
产品模块: • 网络信息雷达
强化数据深挖实现“信息增值”
– 提高舆情产品质量的关键,在于对数据的“加工能力”,通过“加工”实现数据的“增 值”。这就要求舆情监测系统提高对信息的鉴别力、萃取力、掌控力,对数据进行生产、 分析和解读,探索一条为用户提供分众化服务的信息增值之路。 4
【大数据时代舆情服务的机遇与挑战】
跟踪关联数据提高趋势研判
9
利用舆情监测系统做好网络舆情应对
• • • • 建立机制、专人负责。 加强舆情监测系统平台技术的应用 建立舆情工作组,事前预警、事中追踪、事后统计分析、日常协同工作。 统一战线,多部门联动。
•
• • •
加强舆情监测工作纪律,网络安全不止于个人隐私。
培植“为我所用”的互联网根据地。 突发事件不慌张,“尽早讲、持续讲、准确讲、反复讲”。 负面舆情不能一删了之。慎用网络水军、删帖公司…
互联网大数据智能监测系统
某某
建设方案
目录
Contents
A. 大数据时代信息监测系统的应用背景和现状 B. 大数据时代如何科学部署实施信息监测系统 C. 某网络舆情监测系统的功能 D. 实施方案
2
第一部分
摘 要
大数据时代信息监测系统的应用背景和现状
很多事件,都源自一个爆料… 舆情工作中遇到的问题
6
很多事件,都源自一篇微博、帖子…
“黑幕”… “最牛”…
微博、论坛爆料 新闻网站、传统媒体跟进
介入调查
“表哥”…
每 天 都 在 发 生 着
相对纠纷和危机事件发生后 的设法解决,有效监测和评估所 面临的风险,并在事前采取适当 的措施进行规避,是各级党政机 关应借鉴的工作方法
7
……
大数据时代网络舆情信息的主要来源
树立大舆情观念拓展服务边界
– 舆情服务机构应树立大舆情观念,使舆情服务的主体和边界“更全”。这 里的大舆情,强调大数据的关联性,横向看,将服务主体延伸至政府、企 业和社会的各领域;纵向看,将产品内容延伸至包括舆情预警到决策方案 5 在内的各环节。
领导人高度重视网络舆情
互联网 -- 治国理政新平台
– 大数据的核心和目标就是预测。舆情监测平台从互联网浩如烟海的数据中 挖掘信息、判断趋势、提高效益已有实际应用。决策行为将更多地基于数 据、分析和事实做出。
– 舆情系统要不断增强关联舆情信息的分析和预测,把服务的重点从单纯的 收集有效数据向对舆情的深入研判拓展,从注重“静态收集”向注重“动 态跟踪”拓展,从致力“反映问题”向致力“解决问题”拓展,使舆情产 品“更快”——预警快、决策快。
舆情监测系统的应用现状
利用舆情监测系统做好网络舆情应对
3
【大数据时代舆情服务的机遇与挑战】
大数据时代
– “大数据”(Big Data)一词越来越多地被提及,人们用它来描述和定义信息爆炸时代产生的 海量数据,并命名与之相关的信息技术发展与创新。舆情服务在进行行业规范和整合的同时, 正面临着大数据挑战。