大数据初识

信息技术的发展历程（7个阶段）分别是：语言·文字·印刷术·无线电·电视·计算机·互联网·新技术应用，大数据特征有：大量性、多样性、高速性、价值性，一起来了解大数据吧，

大数据初识

• 从大数据到大数据
  • 信息技术的发展历程（7个阶段）
    • 信息技术的发展历程（7个阶段）：语言·文字·印刷术·无线电·电视·计算机·互联网·新技术应用
  • 大数据特征
    • 大数据特征：大量性·多样性·高速性·价值性
  • 大数据面临的挑战
    • 对数据库管理技术的挑战·对传统数据库技术的挑战·对实时性技术的挑战·对网络架构，数据中心，数据运维的挑战
  • 大数据关键技术分类
    • 数据采集技术·数据预处理技术·数据存储技术·数据管理技术·数据统计分析技术·数据挖掘技术·数据可视化技术
• 大数据与数字经济
  • 数字经济的催生（3次浪潮）
    • 信息化1.0:20世纪80年代个人计算机大量普及应用所带来的以单机应用为主要特征的数字化
    • 信息化2.0:20世纪90年代中期，由互联网大规模商用进程所推动的以联网应用为主要特征的网络化
    • 信息化3.0：当前我们正进入以数据的深度挖掘和融合应用为主要特征的智能化阶段
  • 数字经济的基本特征（7大特征）
    • 快捷性·高渗透性·自我膨胀性·边际收益递增性·外部经济性·可持续性·直接性
  • 数字经济的建设方向（7个方向）
    • 加强关键核心技术攻关·加快新型基础设施建设·推动数字经济和实体经济融合发展·推进重点领域数字产业发展·规范数字经济发展·完善数字经济治理体系·积极参与数字经济国际合作
• 数据库基础
  • 数字管理的三个阶段
    • 人工管理阶段
    • 文件管理阶段
    • 数据库系统阶段
  • 数据库管理系统的发展历史
    • 第一代：层次数据库和网状数据库管理系统
    • 第二代：关系数据库管理系统（行和列的关系）
    • 第三代：数据仓库管理系统（OLAP，联机分析处理）
    • 第四代：大数据管理系统（Hadoop生态系统）
  • 数据库设计（6大环节)
    • 需求分析环节
    • 概念结构设计环节（E-R图）
      • 1:1联系·1：n联系·m:n联系
    • 逻辑结构设计环节
    • 物理结构设计环节
    • 数据库的实施环节
    • 数据库的运行和维护环节
  • SQL
    • 优点
    • 语句及分类
      • DDL
      • DML-查增改删
      • DCL
• 数据采集基础
  • 数据源
    • 物理数据
    • 系统日志
    • 业务系统数据
    • 开放数据
    • 其他数据平台
  • 数据采集的方法
    • 感知设备采集法
    • 系统日志采集法
    • 数据库采集法
    • 网络数据采集法
    • 外包或众包
  • 数据类型的划分
    • 结构化数据
    • 非结构化数据
    • 半结构化数据
• 数据可视化基础
  • 概念
  • 数据可视化的重要作用
    • 观测与跟踪数据
    • 分析数据
    • 辅助理解数据
    • 增强数据吸引力