2 国泰安金融大数据案例
【案例主题】私募排排网金融数据可视化分析 【案例目的】用数据采集工具从网络上抓取大量的金融数据，将抓取的大量数据保存到 本地，然后采用数据可视化分析工具，将采集到的数据用图表的形式展现出来。 【案例结果】利用大数据分析的手段将私募网上大量的金融数据用很快速的方式获取， 并且将这些大量的复杂的数据，快速的通过图表方式展示出来，通过大数据分析手段可 以轻松的看出各个不同策略的平均年收益情况比较，以及各个产品年收益情况表现等。
金融大数据案例
1
金融大数据背景介绍
2
金融大数据案例简介
3
案例流程
4
案例结果展示与总结
1 金融大数据背景
数据显示，中国大数据IT应用投资规模以五大行业最高，其中以互联网行 业占比最高，占大数据IT应用投资规模的28.9%，其次是电信领域（19.9%）， 第三为金融领域（17.5%），交通第四，政府和医疗分别为第五和第六。
（二）配置采集流程（分四步完成）
2.2 私募排排网数据抓取过程
（三）开始单击采集或者开启云采集：
单机采集过程：
金融大数据案例PPT(30张)培训课件培 训讲义 培训教 材工作 汇报课 件PPT
2.2 私募排排网数据抓取过程
云采集过程：
金融大数据案例PPT(30张)培训课件培 训讲义 培训教 材工作 汇报课 件PPT
金融大数据案例PPT(30张)培训课件培 训讲义 培训教 材工作 汇报课 件PPT
金融大数据案例PPT(30张)培训课件培 训讲义 培训教 材工作 汇报课 件PPT
3.1 数据可视化软件-tableau
简单易用
极速高效
美观交互的 视图与界面
轻松实现 数据融合
简便的管理
灵活的配置
金融大数据案例PPT(30张)培训课件培 训讲义 培训教 材工作 汇报课 件PPT
2.1 国泰安八爪鱼采集器
4）使用简单：完全可视化流程操作，无需专业知识
• 模拟人的思维操作方式 • 模块化步骤，自由组合 • 鼠标点击拖拽 • 几分钟即可完成采集配置
2.1 国泰安八爪鱼采集器
5）易扩展：可与各种系统自动整合对接
通用数据结构及接口，支持任何异构平台调用
2.2 私募排排网数据抓取过程
金融大数据案例PPT(30张)培训课件培 训讲义 培训教 材工作 汇报课 件PPT
金融大数据案例PPT(30张)培训课件培 训讲义 培训教 材工作 汇报课 件PPT
3.1 数据可视化软件-tableau
Tableau是一款定位在数据可视化的商务智能展现工具。可以用来实现交互地、 可视化的分析和仪表盘分析应用。
• 内置自主知识产权的浏览器 及网页定位解析引擎
• 内置智能流程引擎，自动生 成采集流程
• 可以模拟人的所有操作过程
打开页面，点击网页元素 输入用户名，搜索词等 循环翻页，循环翻下拉列表，循环网址列表 条件判断，分支处理，不同情况不同流程 识别验证码 精准提取网页任何信息 对采集的数据做进一步处理 可视化采集测试，动态流程修改，异常情况报警， ……
第一方面：股价预测 第二方面：客户关系管理 第三方面：投资景气指数
1.2 国泰安金融大数据
1.2 国泰安金融大数据
国泰安金融大数据实验室软件架构图包含了数据源、大数据采集与ETL、大数据存 储、大数据分析与挖掘、大数据展示与可视化这五大模块。解决方案包括了国泰安金融 行业数据，及金融行业相关的一些分析工具等。
金融大数据案例PPT(30张)培训课件培 训讲义 培训教 材工作 汇报课 件PPT
2.2 私募排排网数据抓取过程
（三）导出数据
金融大数据案例PPT(30张)培训课件培 训讲义 培训教 材工作 汇报课 件PPT
金融大数据案例PPT(30张)培训课件培 训讲义 培训教 材工作 汇随着互联网技术的增长和网络海量信息的增长，对信息进行针对性、行 业性、精准性的获取成为一种越来越大的需求，这种获取数据的方式就是网 络数据采集。
网络数据采集的基本思想是：利用数据抓取软件对网页上的数据实现有 针对性、行业性、精准性的抓取。
2.1 国泰安八爪鱼采集器
八爪鱼数据采集系统以完全自主研发的分布式云计算平台为核心，可以在很短的时间 内，轻松从各种不同的网站或者网页获取大量的规范化数据，帮助任何需要从网页获取信 息的客户实现数据自动化采集，编辑，规范化，摆脱对人工搜索及收集数据的依赖，从而 降低获取信息的成本，提高效率。
大数据时代下，越来越多的数据被生产出来，人类采集数据的能力、 运算的能力以及各种方法的出现，帮助我们处理这些庞大的数据集，同样 的，为了更好地展示以及查看这些价值信息，数据可视化技术也在不断的 发展，要求也不断提高。
数据可视化的基本思想是：将大型集中的数据以图形图像形式表示， 并利用数据分析和开发工具发现其中未知信息的处理过程。基本目的是： 化繁为简，使数据变得更有意义，更容易理解。
1.1 金融大数据应用投资介绍
Part2 保险行业大数据应用
随着互联网、移动互联网以及大数据的发展，网络营销、移动营销和个性化 的电话销售的作用将会日趋显现，越来越多的保险公司注意到大数据在保险行业 中的作用。总的来说，保险行业的大数据应用可以分为三大方面：
1.1 金融大数据应用投资介绍
Part3 证券行业大数据应用
1.1 金融大数据应用投资介绍
从投资结构上来看，银行将会成为金融类企业中的重要部分，证券和保 险分列第二和第三位。
1.1 金融大数据应用投资介绍
Part1 银行大数据应用
国内不少银行已经开始尝试通过大数据来驱动业务运营，如中信银行信用 卡中心使用大数据技术实现了实时营销，光大银行建立了社交网络信息数据库， 招商银行则利用大数据发展小微贷款。总的来看银行大数据应用可以分为四大 方面：
2.1 国泰安八爪鱼采集器
1）范围广：全网通用，数据由用户自定义
网页
八爪鱼采集 系统
完整的数据
2.1 国泰安八爪鱼采集器
2）性能高：云采集架构，可支持每天千万以上网页采集
云采集集群 (自动负载均衡，可动态伸缩，热插拔)
中央控制
终端用户
2.1 国泰安八爪鱼采集器
3）功能强：能轻松应对IP封锁，验证码等各种防采集措施