数据与大数据

数据与大数据知识点总结，包括数据，信息与知识。数字化与编码，大数据及其作用与价值。希望对小伙伴有所帮助！

数据与大数据

• 数据、信息与知识
  • 数据（data)的概念
    • 数据是对事物描述的记录
    • 数据的表现形式多种多样，可以有数字、文字、图形、图像、声音等形式。
    • 数据是可加工、可处理的。
  • 信息的概念
    • “信息是为了满足客户决策的需要而经过加工处理的数据。”（霍顿）
    • “信息是能够用来消除不确定的东西。”（克劳德·艾尔伍德·香农）
    • 信息的特征
      • （1）信息可以传播和存储。
      • （2）信息的价值是相对的。
      • （3）信息可以被共享 。
      • （4）信息具有时效性。
    • 合理应用信息
      • （1）敏锐感知周围世界，正确获取信息。
      • （2）具备信息辨别能力，有效甄别信息。
      • （3）遵守信息安全法规，负责任地使用信息。
  • 数据、信息与知识的关系
    • 知识的概念
      • 知识是人们在生活实践中所获得的认识和经验的总和。 分为一般知识和科学知识。
      • 一般知识：在日常生活和工作中，人们所获得的认识和经验的总和。
      • 科学知识：人们对信息的科学组织。
    • 数据、信息与知识的关系
      • 数据是描述事物的记录，它能够承载信息，因此人们可以在处理数据的过程中获得信息。
      • 信息表示的是事物间的相互关系，通过分析数据可以发现其中包含的关系。
• 数字化与编码
  • 进位计数制及其转换
    • 进位计数制度
      • 进位计数制包含数码,基数和位权。
      • 数码：用来表示某种进位进位计数制的一组符号。
      • 基数：可以使用的数码个数。
      • 位权:数码在不同数位上的倍率值。
    • 二进制和十六进制
    • 进位计数制及其转换
      • 二进制转十进制——方法：数码与位权相乘后求和
      • 十进制转二进制——方法：除以2反向取余
      • 十六进制转十进制——方法：数码与位权相乘后求和
      • 十进制转十六进制——方法：除以16反向取余
      • 十六进制转二进制
    • 数据的储存单位
      • 比特（bit）是计算机中最小的数据储存单位，即一个二进制位，一位的取值只能是0或1。
      • 字节（Byte)是计算机中信息组织和存储的基本数据存储单位，1字节就是8比特，字节常用B表示
      • 常用存储单位换算表
  • 数字化及其作用
    • 模拟信号
    • 数字信号
    • 模拟信号的数字化过程
      • 转换过程主要包括采样、量化和编码。
      • 采样是在连续的模拟信号中，每隔一段时间（或空间）取一个值的过程
      • 量化是把采样的值用二进制数值表示出来
      • 编码是为了方便信息的存储、检索和使用而规定的符号系统。编码的过程是将信息按照一定的规则进行变换
  • 数据编码
    • 字符编码
      • （1）ASCII码
        • ASCII码用7位二进制数表示
        • ASCII码存储用8位二进制数表示
        • ASCII码表——数字排列：0～9由小到大依次排列；字母排列：按字母表顺序依次排列；大小排列：数字〈 大小字母〈 小写字母
      • （2）汉字编码
        • 主要是使用的汉字编码标准是GB18030-2005
        • 大部分常用汉字采用双字节编码
        • 输入码、机内码、字形码
      • （3）Unicode字符集和编码方案
        • Unicode字符集分为17组（平面），汉字位于0号平面和2号平面
        • Unicode字符转换成可用于传输、存储的二进制代码需要字符编码方案
    • 声音编码
      • 声音的采样：每隔一段时间在声音的模拟信号上采集一个样本数值
      • 声音的量化：二进制数值表示采样所得到的幅度值的过程
      • 数据存储量=采样频率×量化位数×声道数÷8×持续秒数（字节）
    • 图像编码
      • 图像的采样是按一定的空间间隔，从左到右，自上而下提取画面信息。将图像空间上转化成若干个像素点。每个像素点呈现不同的颜色。
      • 图像的量化是用若干二进制数表示采样得到的每个像素点的颜色。
      • 图像的编码：按一定的方法表示该图像的二进制的序列。
      • 位图：有纵横排列的像素点组成的图像。
      • 图像分辨率：水平方向的像素数量×垂直方向的像素数量
      • 颜色深度（位深度）：记录每个像素点的颜色所需的二进制的位数。
      • 未经压缩的位图图像的数据存储量=图像分辨率×颜色深度÷8（字节）
  • 数据压缩
    • 数据压缩就是采用特殊的编码方式处理数据。使数据占用的存储空间相对减少。以便存储和传输。
    • 数据中存在冗（rong)余。
    • 压缩本质对信息的重新编码。
    • 数据压缩的方法比较多。常用的压缩方法分为无损压缩和有损压缩两种。
      • 无损压缩是指对压缩后的数据进行还原后，得到的数据与压缩前完全相同。
      • 有损压缩过程中会损失一定的信息，压缩后的数据无法还原到与压缩前一致，但不会导致人们对原始数据表达的信息产生误解。
• 大数据及其作用与价值
  • 大数据的特征
    • 1.数据规模大。
    • 2.数据类型多。
    • 3.处理速度快。
    • 4.价值密度低。
  • 大数据的处理过程
    • 1.数据采集
    • 2.数据预处理
    • 3.数据分析
    • 4.数据挖掘应用
  • 大数据的作用及社会影响
    • 1、大数据的作用。
      • 大数据可以反映社会现象。
      • 大数据可以预测发展趋势。
      • 大数据可以指导决策的制定。
    • 2、大数据对社会发展的影响。
      • 大数据技术优化社会管理模式。
      • 大数据技术创新提升服务品质。
      • 大数据技术成为科学研究的新途径。
• • 十进制数是人们生活中常用的进位计数制；
  • 二进制数一种常用于计算机中的进位计数制；
• 由于计算机采用二进制数进行运算和储存，因此使用计算机处理信息，首先要把待处理的信息用二进制数来表示。
• 同一的描述记录也可以有不同的数据表现形式，同一数据也可能描述不同的事物。
• 计算机处理的数据
• 单纯的数据有意义吗？ 脱离具体的情境和形式，无法确定数据的意义。