导图社区 数据与大数据思维导图
数据与大数据思维导图,数据是信息的载体,是客观事物的符号表示。它可以是数字、文本、图像、音频、视频等多种形式。数据在日常生活、科学研究、商业决策等各个领域都扮演着至关重要的角色。
社区模板帮助中心,点此进入>>
论语孔子简单思维导图
《傅雷家书》思维导图
《童年》读书笔记
《茶馆》思维导图
《朝花夕拾》篇目思维导图
《昆虫记》思维导图
《安徒生童话》思维导图
《鲁滨逊漂流记》读书笔记
《这样读书就够了》读书笔记
妈妈必读:一张0-1岁孩子认知发展的精确时间表
数据与大数据
数据信息与知识
数据的概念:数据是对事物描述的记录
数据的表现形式
数字
文字
图形
图像
声音
数据是可加工可处理的
信息的概念:信息管理专家F.W.霍顿将信息定义为:“星期是为了满足用户决策的,需要,而经过加工处理的数据。简单地说信息是经过加工的数据,或者说信息是数据处理的结果。
信息的特征
信息可以传播和储存
信息的价值是相对的
信息可以被共享
信息具有时效性
合理应用信息
敏锐感知周围世界,正确获取信息
具备信息辨别能力,有效甄别信息
遵守信息安全法规,负责任的使用信息
数据信息与知识的关系:人们运用各种信息技术工具来认识事物表达思想分享知识,让学习和工作更加高效。
数据是描述事物的记录,他能够承载信息,因此人们可以在处理数据的过程中获得信息。
信息表示的是事物间的相互关系,通过分析数据可以发现其中包含的关系。
知识
一般知识:在日常生活和工作中人们所获得的知识和经验总和。
科学知识:人们对信息的科学组织,他是经过研究验证获得学界一致认可的内容。
数字化与编码
进位技术制及其转换
进制计数制度
二进制:二进制是一种常用于计算机中的近卫技术制他的基数为2,只有0,1两个数码。
十进制:十进制是人们生活中常用的进位计数制,他的基数为10,由0,1,2……,9共10个数码组成
十六进制:十六进制的基数是16,包含0,1,2,3……,9,A,B,C,D,E,F,共16个数码。
不同进位计数制的互相转换
十进制转二进制:÷2反向取余
二进制转十进制:按权展开
二进制转十六进制:把二进制数从低位到高位二十四位一组划分,每组用一为十六进制数表示,不足四位二进制,数高位用“0”补齐。
数据的存储单位
KB千字节:1KB=1024B=2^10B
MB兆字节:1MB= 1024KB =2^20B
GB吉字节:1GB = 1024MB =2^30B
TB太字节:1TB= 1024GB=2^40B
PB拍字节:1PB= 1024TB =2^50B
EB艾字节:1EB= 1024PB=2^60B
数字化及其作用
数字化的概念:将现实世界中各种各样的信息用二进制数来表示的过程就是信息数字化
数字信号:数字化可将模拟量转化成数字量,数字量的变化在时间或树枝上都是离散的。
模拟信号的数字化过程:使用电子设备采集的信号是模拟信号,为了让数字设备进行存储和处理,将模拟信号转化为数字信号
采样:在连续的模拟信号中,每隔一定时间或空间取一个值得过程。
量化:量化是把采样的只用二进制数值表示出来。
编码:对这些二进制数值进行编码,就可以形成一系列二进制代码。这样计算机就可以对其进行识别存储和加工了。
数据编码
1.字符编码
(1)ASCII码:国际上广泛使用的英文字符编码是ASCII码,标准的ASCII码为其为二进制编码(及D6~D0位)存储时占用一个字节,最高位为0。标准的ASCII字符集定义了128个字符。其中包括10个阿拉伯数字,26个大写英文字母,26个小写英文字母,33个符号,共95个可打印字符以及33个控制字符
(2)汉字编码:主要使用的汉字编码标准是GB 18030—— 2005。它支持多种自己的汉字编码,如单字节双子结合四字节编码。大多使用双字节编码。
(3)Unicode字符集合编码方案:由于不同语言的编码各不相同,为了统一所有文字的编码,Unicode应运而生,Unicode字符集分为17组,每组含有65536个码位,共114112个
UTF-8
UTF-16
UTF-32
2.声音编码
声音是振动产生的波,由不同频率的正弦波合成。它是一种连续变化的模拟信号需要通过采样,量化和编码后实现数字化。
声音的采样是指每隔一段时间再声音的模拟信号上采集一个样本数值。
声音的量化使用二进制数值表示采样所得到的幅度值的过程。
3.图像编码
未经压缩的位图图像的数据储存量=图像分辨率x颜色深度/8(字节)
数据压缩
无损压缩:对压缩后的数据进行怀孕后,得到的数据压缩钱完全相同。
有损压缩:通常应用于图像声音等数字化后存在大量冗余信息的文件。压缩后的数据无法还原到与压缩前移至,但不会导致人们对原始数据表达的信息产生误解。
大数据及其作用与价值
大数据的特征
数据规模大
数据类型多
处理速度快
价值密度低
大数据处理过程
数据采集:大数据的采集是大数据处理过程中的最初环节,它可以通过射频识别技术,传感器技术,社交网络媒体的方式获得各种类型的海量数据。
数据预处理:数据采集过程中,通常有一个或多个数据源所采集的数据,已受到噪声数据数据缺失数据冲突的影响。因此需要对采集的数据进行预处理,以保证大数据分析与预测结果的准确性于价值。
数据分析:数据分析是大数据处理中的关键环节,根据大数据应用情境与决策需求,选择合适的数据分析技术,提供大数据分析结果的可用性准确性和价值。
数据挖掘应用:经过数据分析,可以描述出事物的变化状况,找出其中的规律,将分析结果运用到实践中。
大数据的作用及社会影响
大数据的作用
大数据可以反映社会现象,借助大数据,能够反映出人们的意图情感观点和需求,这些情感因素会决定人们在决策或行动时,所采取的方式和所选择的方法。
大数据可以预测发展趋势。在大数据分析过程中通过分析不同类型数据的互相关联,描述数据的动态变化就可以比较清晰地展示世界的脉络关系,预测其发展趋势。
大数据对社会发展的影响
大数据技术优化社会管理模式
大数据技术创新提升服务质量