当前位置:文档之家› 大数据资源服务平台0001

大数据资源服务平台0001

系统管理
基础管理:要求提供应用和数据服务:要求针对本地数据模型的结构和分类提供维护管理功能。 索引管理:要求针对资源、对象索引的构建任务情况和数据量情况提供监 控功能。
日志管理:要求针对采集的日志信息,提供用户登录和相关操作日志的查 询功能。
10
社会数据研判预 警系统
1、实时布控:通过上传需要比对的人员数据,与本地重点 人员名单、 本地库、 请求全国服务数据或其他地市协同数据 进行比对, 系统比对完成之后, 自动将比对结果以消息推送 的形式传递。
2、数据采集:对结构化数据、图片、视频等类型的数据上 传,数据实时传送至资源库。
3、比对预警:通过app的比对功能自主比对,自主比对以 本地重点人员名单和本地库为依据,比对结果实时显示预 警。

1
4
汇集库建设服务
建设汇集库,形成数据集市体系,汇集、清洗、标准化平顶 山市公安内外部数据(结构化数据不少于6T,不少于60亿
数据;照片及非结构化数据;社会单位数据等) ;按需建设 全、多个专题库和碰撞库等支撑应用展现

1
5
数据资源目录管
理系统
1.公安标准梳理(限定词、数据元、代码等) 。2.按照公安 标准对数据进行对照, 结合相关信息编目, 形成标准目录 (不 少于900个标准目录)
3.包含商业版数据整合管理系统1套

1
7
资源服务总线系

1.主要实现对本地应用的统一接入, 减少应用系统对底层数 据库的直接访问, 提高数据安全性, 解决全市以及协作区域 间信息服务资源的简便对等开放、 共享标准规范、 本地信息 资源集中管理、 面向应用服务的统一接入、 高可用服务支撑 能力、安全审计等一系列问题。
采集数据源扩展 提供多种可靠采集技术手段, 支持扩展多种数据源头采集工 作。如物流信息、汽车租赁、就医信息、景区信息、征地纠 纷、担保受损、涉民教师等。
大数据辅助决策平台 结合公安工作现状及后续工作需求, 定制开发大数据辅助决 策平台, 通过定制开发多个专题信息大屏动态展示我市治安 防范能力, 打击犯罪能力, 社会治安管理和社会数据资源整 合成果等。
1.提供个人门户、 应用超市、 应用导航功能并实现单点登录 功能;
2.与公安PKI/PMI系统无缝对接,实现用户身份统一认证;
3.提供独立的权限管理流程、应用发布、应用审核、应用统 计管理、数据安全性管理和日志管理。

1
3
基础专题关系应 用软件
对本市采集的社会数据进行专题分析, 创建专题库以及对应 的专题分析模型。
3.统一注册各种类型的数据资源
4.对数据质量、数据运行情况、数据追溯进行管理
5.包含商业版数据资源管理系统1套

1
6
数据资源监管系

1.提供大数据ETL整合工具, 对各类源头数据库、 文件及其 它数据类型进行数据抽取, 并在过程中进行清洗转换, 将结 果写入汇集库。
2.对ETL进行集中调度和监控(不少于1500个ETL任务)
个人门户
提供给每一个用户使用的个人应用门户, 用户可以通过应用超市将所需的 应用添加到个人桌面上便于使用, 需提供页面功能截图。
应用超市
将用户常用的应用按照使用频度集中展示出来, 用户可以自行调整其顺序 和显示位置。此外,用户还能添加新的应用到常用应用中来,需提供页面 功能截图。
实现要求
由于现有的数字证书中用户信息内容有限, 所以系统获取的证书信息还需 要与警综平台记录的警员信息相结合才能获取用户的行政区划、组织机 构、警种类别等其他详细信息
提供不少于600项标准数据资源,每个资源不少于20个字段的查询权重 设置。
提供不少于600项标准数据资源,每个资源不少于20个字段的查询权限 设置。
★技术要 求
要求采用分布式全文索引技术,为基础数据资源建立全文索引,满足对基 础数据资源任意字段和全部字段的模糊检索需求。
要求采用HADOOP技术架构建设对象专题库,可以基础数据资源按专题 (如 人员、案件前科等)进行分类重组整合相关信息。
索请求,搜索引擎依据参数执行搜索任务后返回结果给请求方。
分层索引
索引构建:要求基于Lucene实现索引构建,通过特殊的索引结构(资源、 对象)实现传统数据库不擅长的全文索引机制,将数据源中的数据结合分 词建立倒排索引,并依据具体的部署情况在搜索引擎服务器生成各层索 引。
索引入库:要求基于索引构建,通过任务调度引擎全量或增量生成资源、 对象索引并保存到搜索引擎服务器。

1
11
数据对接中转机
通过对接采集点数据源进行数据抽取, 并将数据上传至前置 服务器。

10
12
前置服务器
采集点数据汇集载体, 安装数据库用以接收外来数据, 安装 数据抽取/接收程序。

4
13
防火墙
对流经它的网络通信进行扫描, 能够过滤掉一些攻击, 以免 其在前置服务器上被执行。防火墙还可以关闭不使用的端 口。而且它还能禁止特定端口的流出通信, 封锁特洛伊木马。 最后, 它可以禁止来自特殊站点的访问, 从而防止来自不明 入侵者的所有通信。
4、拓展应用:通过提供开放性的API接口以供后续人像应
用、 电子签章应用、 图片应用、 音频应用、 视频应用的接入, 提供对接。
5、预警布控数据范围包含社会数据采集的相关数据和公安 部门指定的数据。
6、与本地重点名单和本地库数据实时比对。7、与全国请求服务和其他地市协同数据延时比对。
8、通过本地库或本地重点人员名单比对完成的结果可通过 服务总线进行分发共享。
2.提供对应的查询、比对、交换、布控服务接口。
3.对总线开放的节点、目录、资源、进行运行监控、日志管 理。
4.提供平台级别间对接。
5.商业版资源服务总线系统1套。

1
8
运维服务
1、公安内外部数据进行数据拉通的数据实时运维及巡检工 作;
2、负责维护数据交换,保证旅馆、网吧、卡口等数百个数 据交换的正常运行,保障交换数据能正常汇入资源库;3、提供两年一人驻场运维服务,第三年远程支持。

1
14
人像数据采集终 端
采集人员身份证信息及现场人像拍照信息。

20
15
万兆交换机
本项目交换机配置为24个10GES FP+口(配置8个10GES FP+光模块),配置交流双电源

1
16
终端采集路由器
主要应用于数据库不在信息采集点(商家)本地的实例中。 功能是信息采集点(商家)部署终端采集路由器,通过对经 过路由器的报文进行深度分析,并抓取有用的社会信息。

20
、详细技术参数要求
序号
货物名称
技术参数
详细技术要求
1
全文检索
系统
★全文数 据支撑
提供不少于30亿数据或不少于600项标准数据资源,并提供不少于800个ETL任务以增量任务形势将数据资源配置进入全文检索系统。 提供进入全文检索系统的所有数据资源的检索功能, 不少于600项资源独 立检索;提供人员关系计算同户人、同住宿、同上网、同机构分析时,每 项不少于200万数据参与计算;车辆行车轨迹、人员出行、留宿轨迹分析 时,每项不少于200万数据参与计算。
轨迹分析
基于人员、车辆等信息,实时计算出的当前轨迹落点,并依靠GIS地图动 态活跃在地图中,需提供页面功能截图。
撞线分析
系统会针对检索内容进行分类预警, 如某一时间段对某一人员或物品进行 多次检索的预警提示,需提供页面功能截图。
搜索引擎
要求基于搜索服务接口, 响应智能搜索系统客户端或第三方应用发起的搜
应用情况监测:通过系统能够对应用的发布、使用情况进行浏览、查询,
能够对使用评价、应用的次数进行统计,能够对应用的状态进行监控。
应用状态监控:应用是否存活的状态进行监控的管理功能。应用状态的监
控需要通过应用预设的状态接口由门户平台后台管理程序自动进行状态 检测,并将检测的结果及时记录并反馈到应用状态监控界面,以提醒应用 的管理和运维人员及时处置状况异常的应用。

29Biblioteka 互联网信息采集 系统结构化数据导入
1、开发结构化数据导入程序,并定义结构化数据的标准格 式。
2、将按照标准格式整理的结构化数据导入程序并保存在公 安网汇集库中。
3、实现导入异常预警,和异常准确定位的功能。

1
零散线索情报录入
1、开发零散线索情报录入程序,并定义录入的格式。
2、工作人员在完成零散情报录入工作的同时,将涉及的嫌 疑人员、 录入人员等相关人员信息录入在程序并保存在公安 网汇集库中。
大数据资源服务平台
设备清单及技术参数
一、货物清单
序号
产品名称
内容
单位
数量
1
全文检档案展现;
2.提供全部资源检索、 档案检索等全面智能的检索方式和深 度立体的检索方式;
3.提供撞线分析、服务资源检索等高级个性检索方式。

1
2
应用门户系统
照片搜索
要求基于检索关键字针对接入的照片相关文本信息进行检索, 并返回相关 的人员照片以浏览视图方式进行展现;支持对接第三方的人像比对服务, 需提供页面功能截图。
专题档案
要求支持数据资源按专题(人、案件前科等)进行分类重组,采用“一人
一档”的展示模式,实现对数据的关联组织与档案式呈现功能。超级档案 的信息内容丰富,具备高价值的特点。以人员专题为例,主要分为基本情 况、案件信息、 人员关系、 活动轨迹五个展示模块, 需提供页面功能截图。
资源搜索
要求针对本地资源和异地资源提供全部资源的模糊搜索、 单个资源的条件 搜索功能,以及针对异地共享服务资源提供请求服务查询功能,将返回命 中资源目录和命中资源记录给用户,需提供页面功能截图。
相关主题