数据来源
• 社会调查 • 公众媒体 • 科学实验 • 实践活动 • 政府机构的官方网络平台 • 物联网和社交网
数据处理的流程包括哪四个环节？
• 数据采集 • 数据整理 • 数据分析 • 数据呈现
网络爬虫定义和功能
• 网络爬虫，是按照一定的规则，自动抓取 互联网内容的程序。
• 网络爬虫的主要功能是自动采集其可以访 问到的网页内容，这种技术已被广泛用于 搜索引擎或其他类似网站。
数据分析与可视化
数据分析的作用
• 了解事物的现状 • 剖析事物的发展历程 • 预测事物的未来走向
常用的数据分析方法
• 对比分析法（比较分析法）：数据比较， 分析差异，揭示规律。
• 平均分析法：计算平均数反映一般水平。 • 结构分析法（构成分析法）：将各个部分
与总体进行对比。
体验数据分析
• 用电子表格软件进行数据分析 • 用在线数据分析平台进行数据分析 • 用编程工具进行数据分析
数据整理的目的
• 是对数据进行校验和标准化。
用于分析的数据必须保证数据质量 (三性)
• 完整性 • 统一性 • 准确性
数据安全威胁
• 计算机病毒 • 黑客攻击 • 数据存储介质损坏 • 个人失误
数据备份
• 可移动存储设备备份 • 网络备份 • 云存储将数据存储在网络上的服务器中，
是网络备份的一种重要方式。云存储具有 成本低、管理方便和可扩展性高等优势， 但也存在安全性不足等缺点。
数据可视化
• 图表：折线图（发展趋势）
பைடு நூலகம்
•
柱形图（数据比较）
•
饼图（部分与整体关系）
•
散点图（各数值之间的关系)
•
雷达图(每个数据相对中心的变化）
• 词云：是目前常用的关键词可视化形式。
数据分析报告
• 开篇（标题、目录、前言） • 正文（分析过程和结果） • 结尾（结论、建议、附录）