当前位置:
文档之家› 高职院校大数据分析平台建设方案
高职院校大数据分析平台建设方案
• 部分数据源有错误 • 接口与结构不规范
8
校园大数据建设困境——用户多样
校领导
院领导
校工会
校医院
图书馆
设备处
老师
本科生/研 究生
就业处
9
校园大数据的特征 智能终端广泛应用 集体知识共生共享 业务应用智能融合
互联网络高速泛在 外部智慧融会贯通 团队协作便利充分
10
校园大数据的组成
智慧 环境
智慧 资源
开
协放平
作
等
“互联网”
理念
共 享
用 户
互 动
体
验
学习
情景
识别
智慧 教室
与环 境感
知
移动 互联
资源 关键技
+ 整合
术
社会
与组
网络
织 大数
学习
据
分析
5
职业院校智慧校园主要特征
数字校园 提升 智慧校园
云计算 物联网 移动互联 大数据 达到 人工智能 社交网络 智慧管理 虚拟现实
智能
个性 化服
务
识别
智慧运 行
虚拟 映像
智慧教 开放
智能 交互
育
的教 学环
便利
境
生活
智慧校园是学校十三五期间信息化建设努力的方向
。
6
校园大数据建设趋势
OA系统
研究生系 统
报表系统
后勤系统 本科教务
人力资源 系统
科研管理 信息平台 财务资源
多而数 孤据 岛不精 共享困难 业务举步维艰
重数个工 复据性作 建共服协
系统 学生管理
系统 合同管理
数据源
结构化 数据
非结构 化数据
实时数 据
非实时 数据
学校业 务系统
互联网 数据 15
智慧教育-大数据平台-现有业务数据
现有系统
教务系统 学籍系统 一卡通系统
……
兄弟单位
合作院校 省市招生办
……
结构化数据 ……T+
教务信息 课程与试题库
成绩/消费/服务信息
教职信息
学籍信息
……
半结构化数据 …….G+/天
2020
高职院校大数据分析平台 建设方案
Contents
目录
1. 建设背景和需求分析 2. 大数据分析决策平台建设 3. 舆情大数据系统展示
Part 1
建设背景和需求分析
政策依据
《国务院关于加快发展现代职业教育的决定》国发〔2014〕19号
44
新理念和新技术使智慧校园建设成为必然
智慧校园建设必然性
系统
审计系统
校友系统
设备平与台实
验管理系•
孤岛
系统繁多
统 • 兼容性不够
迎新系统
•Leabharlann 用户体验不好审议系统• 分析挖掘难度 大
……
服务孤岛
设享务同 严不不受 重足深阻
下一步 怎么办?
7
校园大数据建设困境——数据源
数据来源受限
分析数据量少
接口不完善
• 数字校园系统产生数据 • 数据的维度少来源不足
• 数据量百GB到几TB • 结构化数据为主
综 合 行 为 画 像
异 常 预 警
行 为 轨 迹 分 析
群 体 行 为 分 析
精 准 就 业 推 荐
学 工 分 析
人 事 分 析
实 验 室 分 析
科 研 分 析
管采 库
理集
软与 教
件清 洗
师 微 观
智 慧 校
数
园
据
推
仓
荐
库
心 理 健 康 预 警
学 生 个 人 大 数 据 报 告
互
联 网 舆 情 分
数据采集层 存量和增量
结构化采集工具
标准化数据 Hadoop数据仓库
聚合建模数据
文本/接口/FTP 数据解析工具
实时数据 流式实时处理工具
数据统一管理平台 DataHouse 数据安全管理 库表权限分配
应用服务存储管理 DBManager
服务节点监控管理
Hadoop集群管理
自动化安装部署
采集工作流管理
机器学习
聚类分析、 分类算法、频度关联 分析和推荐系统在内的常用算法。
自然语言分析
语义分析、情绪分析 文本分类、聚类 相似度计算 话题监测与跟踪
24 24
智慧教育-大数据平台-知识服务
把一个文本分到一 个或多个类别中, 可以对其进行过滤、 检索、分组,提高
管理效率。
给定文本,在某文 本数据库中找出与 之内容相似或相近
教 务 分 析
学 业 分 析
析
资 产 分 析
学 校 信 息 化 管 理 分 析
科 研 分 析 与 横 向 对 比
18
智慧教育-大数据平台-分析纬度
成
长
实
身
学践 生
学
体
基础信
业
素
息
进
质
步
19 19
智慧教育-大数据平台-分析纬度
个
人
经
教
教历师
专
学
基础
业
能
信息
发
力
展
20 20
智慧教育-大数据平台-分析纬度
智慧 管理
智慧 服务
11
目录
公校安园业大务数架据构概及述特性分析 曙光校园大数据决策系统解决方案 典型案例
融合创新 合作共赢
12
Part 2
大数据分析决策平台
XXX科技
14
大数据平台总体逻辑图
架构 | 前后分离,可高效率并行开发 前端| 基于FaceBook开源框架React 后端 | 基于 SpringMVC+Mybatis 管理 | 强大的集群管理,监控 安全 | 支持IP白名单,SQL黑名单,SQL注入攻击拦截 扩展 | 支持水平扩展,纵向分库分表
文本的技术
识别文本中具有特 定意义的实体,主 要包括人名、地名、 机构名、专有名词
等
情感分析是通过对 文本进行分析,给 出文本情感的倾向
性的过程。
对一篇文章进行分 析后自动形成能够 反映文章主要内容
21 21
智慧教育-大数据平台-分析纬度
22 22
智慧教育-大数据平台-分析纬度
设备 处
校工 会
服务 机构
图书 馆
校医 院
23 23
智慧教育-大数据平台-知识图谱
知识图谱
知识图谱本质上是语义网络,由 节点(Point)和边(Edge)组成。知识 图谱是关系网络的最有效的表示
方式
决策辅助
聚类分析、 分类算法、频度关联 分析和推荐系统在内的常用算法。
XXX科技
应用层
智慧课室
云平台
智慧教学
大数据应用
API接口
第三方BI工具
学校管理
学校安全
学校教学
学校服务
学校科研
学生大数据竞赛
结果层
数据管理平台
分布式结构化存储集群 支持通用数据库软件
搜索引擎
缓存
计算层
机器学习
基础算法
基础模型
应用模型
实时流计算
存储层
交互式接口
数据计算接口
开发语言支持全面
原始数据保全备份
课程信 息 档案信息
……
监管部门 高教委 教育局 ……
非结构化数 据
……G/天 学习资料
等 邮件/消息/视频/咨询
……
流式数据
交易 教学等
…………
新增系统
舆情系统 科研项目 微教育系统 健康管理系统
……
实时流数据 银行圈存
一卡通消费 服务消费 ……
16 16
教育大数据建设方向与产品
管
理
大
数
据
校领导驾驶舱
行 为 画 像
轨
学
迹 分
生析
大
数综
据
合 预
警
大 数 据 报 告
人事大数据分析
学生大数据分析
资产大数据分析
学工大数据分析
信息化大数据分析
财务大数据分析
教 学 大 数 据
选修课
课程
消费
爱好
习惯
自习
借阅
成绩
高分
活动
科
研
就 业
大
指数
导据
科 研 大 数 据
17
教育大数据建设内容
学
大 数数 据据
生 微 观 数 据 仓