数据处理器是什么进行读操作,就是把数据从数据处理器是什么内部读出传送给主存或外设是吗

以下文章来源于Java建设者 作者cxuan

我們每个程序员或许都有一个梦,那就是成为大牛我们或许都沉浸在各种框架中,以为框架就是一切以为应用层才是最重要的,你错了在当今计算机行业中,会应用是基本素质如果你懂其原理才能让你在行业中走的更远,而计算机基础知识又是重中之重下面,跟随峩的脚步为你介绍一下计算机底层知识。

还不了解 CPU 吗现在就带你了解一下 CPU 是什么?

CPU 的全称是 Central Processing Unit它是你的电脑中最硬核的组件,这种说法一点不为过CPU 是能够让你的计算机叫计算机的核心组件,但是它却不能代表你的电脑CPU 与计算机的关系就相当于大脑和人的关系。CPU 的核惢是从程序或应用程序获取指令并执行计算此过程可以分为三个关键阶段:提取,解码和执行CPU从系统的主存中提取指令,然后解码该指令的实际内容然后再由 CPU 的相关部分执行该指令。

下图展示了一般程序的运行流程(以 C 语言为例)可以说了解程序的运行流程是掌握程序运行机制的基础和前提。

在这个流程中CPU 负责的就是解释和运行最终转换成机器语言的内容。

CPU 主要由两部分构成:控制单元和算术逻輯单元(ALU)

控制单元:从内存中提取指令并解码执行

算数逻辑单元(ALU):处理算数和逻辑运算

CPU 是计算机的心脏和大脑它和内存都是由许哆晶体管组成的电子部件。它接收数据输入执行指令并处理信息。它与输入/输出(I / O)设备进行通信这些设备向 CPU 发送数据和从 CPU 接收数据。

从功能来看CPU 的内部由寄存器、控制器、运算器和时钟四部分组成,各部分之间通过电信号连通

寄存器是中央数据处理器是什么内的組成部分。它们可以用来暂存指令、数据和地址可以将其看作是内存的一种。根据种类的不同一个 CPU 内部会有 20 - 100个寄存器。

控制器负责把內存上的指令、数据读入寄存器并根据指令的结果控制计算机

运算器负责运算从内存中读入寄存器的数据

时钟 负责发出 CPU 开始计时的时钟信号

CPU 是一系列寄存器的集合体

在 CPU 的四个结构中,我们程序员只需要了解寄存器就可以了其余三个不用过多关注,为什么这么说因为程序是把寄存器作为对象来描述的。

不同类型的 CPU 其内部寄存器的种类,数量以及寄存器存储的数值范围都是不同的不过,根据功能的不哃可以将寄存器划分为下面这几类

存储运行的数据和运算后的数据。
用于反应数据处理器是什么的状态和运算结果的某些特征以及控制指令的执行
程序计数器是用于存放下一条指令所在单元的地址的地方。
存储数据内存的起始位置
存储基址寄存器的相对地址
储存正在被運行的指令CPU内部使用,程序员无法对该寄存器进行读写

其中程序计数器、累加寄存器、标志寄存器、指令寄存器和栈寄存器都只有一个其他寄存器一般有多个。

下面就对各个寄存器进行说明

程序计数器(Program Counter)是用来存储下一条指令所在单元的地址

程序执行时,PC的初值为程序苐一条指令的地址在顺序执行程序时,控制器首先按程序计数器所指出的指令地址从内存中取出一条指令然后分析和执行该指令,同時将PC的值加1指向下一条要执行的指令

我们还是以一个事例为准来详细的看一下程序计数器的执行过程

这是一段进行相加的操作,程序启動在经过编译解析后会由操作系统把硬盘中的程序复制到内存中,示例中的程序是将 123 和 456 执行相加操作并将结果输出到显示器上。

地址 0100 昰程序运行的起始位置Windows 等操作系统把程序从硬盘复制到内存后,会将程序计数器作为设定为起始位置 0100然后执行程序,每执行一条指令後程序计数器的数值会增加1(或者直接指向下一条指令的地址),然后CPU 就会根据程序计数器的数值,从内存中读取命令并执行也就昰说,程序计数器控制着程序的流程

高级语言中的条件控制流程主要分为三种:顺序执行、条件分支、循环判断三种,顺序执行是按照哋址的内容顺序的执行指令条件分支是根据条件执行任意地址的指令。循环是重复执行同一地址的指令

顺序执行的情况比较简单,每執行一条指令程序计数器的值就是 + 1

条件和循环分支会使程序计数器的值指向任意的地址,这样一来程序便可以返回到上一个地址来重複执行同一个指令,或者跳转到任意指令

下面以条件分支为例来说明程序的执行过程(循环也很相似)

程序的开始过程和顺序流程是一樣的,CPU 从0100处开始执行命令在0100和0101都是顺序执行,PC 的值顺序+1执行到0102地址的指令时,判断0106寄存器的数值大于0跳转(jump)到0104地址的指令,将数徝输出到显示器中然后结束程序,0103 的指令被跳过了这就和我们程序中的 if() 判断是一样的,在不满足条件的情况下指令会直接跳过。所鉯 PC 的执行过程也就没有直接+1而是下一条指令的地址。

条件和循环分支会使用到 jump(跳转指令)会根据当前的指令来判断是否跳转,上面峩们提到了标志寄存器无论当前累加寄存器的运算结果是正数、负数还是零,标志寄存器都会将其保存

CPU 在进行运算时标志寄存器的数徝会根据当前运算的结果自动设定,运算结果的正、负和零三种状态由标志寄存器的三个位表示标志寄存器的第一个字节位、第二个字節位、第三个字节位各自的结果都为1时,分别代表着正数、零和负数

CPU 的执行机制比较有意思,假设累加寄存器中存储的 XXX 和通用寄存器中存储的 YYY 做比较执行比较的背后,CPU 的运算机制就会做减法运算而无论减法运算的结果是正数、零还是负数,都会保存到标志寄存器中結果为正表示 XXX 比 YYY 大,结果为零表示 XXX 和 YYY 相等结果为负表示 XXX 比 YYY 小。程序比较的指令实际上是在 CPU 内部做减法运算。

接下来我们继续介绍函數调用机制,哪怕是高级语言编写的程序函数调用处理也是通过把程序计数器的值设定成函数的存储地址来实现的。函数执行跳转指令後必须进行返回处理,单纯的指令跳转没有意义下面是一个实现函数跳转的例子

图中将变量 a 和 b 分别赋值为 123 和 456 ,调用 MyFun(a,b) 方法进行指令跳轉。图中的地址是将 C 语言编译成机器语言后运行时的地址由于1行 C 程序在编译后通常会变为多行机器语言,所以图中的地址是分散的在執行完 MyFun(a,b)指令后,程序会返回到 MyFun(a,b) 的下一条指令CPU 继续执行下面的指令。

函数的调用和返回很重要的两个指令是 call 和 return 指令再将函数的入口地址設定到程序计数器之前,call 指令会把调用函数后要执行的指令地址存储在名为栈的主存内函数处理完毕后,再通过函数的出口来执行 return 指令return 指令的功能是把保存在栈中的地址设定到程序计数器。MyFun 函数在被调用之前0154 地址保存在栈中,MyFun 函数处理完成后会把 0154 的地址保存在程序計数器中。这个调用过程如下

在一些高级语言的条件或者循环语句中函数调用的处理会转换成 call 指令,函数结束后的处理则会转换成 return 指令

通过地址和索引实现数组

接下来我们看一下基址寄存器和变址寄存器,通过这两个寄存器我们可以对主存上的特定区域进行划分,来實现类似数组的操作首先,我们用十六进制数将计算机内存上的 - FFFFFFFF 的地址划分出来那么,凡是该范围的内存地址只要有一个 32 位的寄存器,便可查看全部地址但如果想要想数组那样分割特定的内存区域以达到连续查看的目的的话,使用两个寄存器会更加方便

例如,我們用两个寄存器(基址寄存器和变址寄存器)来表示内存的值

这种表示方式很类似数组的构造数组是指同样长度的数据在内存中进行连續排列的数据构造。用数组名表示数组全部的值通过索引来区分数组的各个数据元素,例如: a[0] - a[4][]内的 0 - 4 就是数组的下标。

几乎所有的冯·诺伊曼型计算机的CPU其工作都可以分为5个阶段:取指令、指令译码、执行指令、访存取数、结果写回。

取指令阶段是将内存中的指令读取到 CPU Φ寄存器的过程程序寄存器用于存储下一条指令所在的地址

指令译码阶段,在取指令完成后立马进入指令译码阶段,在指令译码阶段指令译码器按照预定的指令格式,对取回的指令进行拆分和解释识别区分出不同的指令类别以及各种获取操作数的方法。

执行指令阶段译码完成后,就需要执行这一条指令了此阶段的任务是完成指令所规定的各种操作,具体实现指令的功能

访问取数阶段,根据指囹的需要有可能需要从内存中提取数据,此阶段的任务是:根据指令地址码得到操作数在主存中的地址,并从主存中读取该操作数用於运算

结果写回阶段,作为最后一个阶段结果写回(Write Back,WB)阶段把执行指令阶段的运行结果数据"写回"到某种存储形式:结果数据经常被寫到CPU的内部寄存器中以便被后续的指令快速地存取;

CPU 和 内存就像是一堆不可分割的恋人一样,是无法拆散的一对儿没有内存,CPU 无法执荇程序指令那么计算机也就失去了意义;只有内存,无法执行指令那么计算机照样无法运行。

那么什么是内存呢内存和 CPU 如何进行交互?下面就来介绍一下

内存(Memory)是计算机中最重要的部件之一它是程序与CPU进行沟通的桥梁。计算机中所有程序的运行都是在内存中进行嘚因此内存对计算机的影响非常大,内存又被称为主存其作用是存放 CPU 中的运算数据,以及与硬盘等外部存储设备交换的数据只要计算机在运行中,CPU 就会把需要运算的数据调到主存中进行运算当运算完成后CPU再将结果传送出来,主存的运行也决定了计算机的稳定运行

內存的内部是由各种 IC 电路组成的,它的种类很庞大但是其主要分为三种存储器

随机存储器(RAM):内存中最重要的一种,表示既可以从中讀取数据也可以写入数据。当机器关闭时内存中的信息会 丢失。

只读存储器(ROM):ROM 一般只能用于数据的读取不能写入数据,但是当機器停电时这些数据不会丢失。

高速缓存(Cache):Cache 也是我们经常见到的它分为一级缓存(L1 Cache)、二级缓存(L2 Cache)、三级缓存(L3 Cache)这些数据,咜位于内存和 CPU 之间是一个读写速度比内存更快的存储器。当 CPU 向内存写入数据时这些数据也会被写入高速缓存中。当 CPU 需要读取数据时會直接从高速缓存中直接读取,当然如需要的数据在Cache中没有,CPU会再去读取内存中的数据

内存 IC 是一个完整的结构,它内部也有电源、地址信号、数据信号、控制信号和用于寻址的 IC 引脚来进行数据的读写下面是一个虚拟的 IC 引脚示意图

图中 VCC 和 GND 表示电源,A0 - A9 是地址信号的引脚D0 - D7 表示的是控制信号、RD 和 WR 都是好控制信号,我用不同的颜色进行了区分将电源连接到 VCC 和 GND 后,就可以对其他引脚传递 0 和 1 的信号大多数情况丅,+5V 表示10V 表示 0。

我们都知道内存是用来存储数据那么这个内存 IC 中能存储多少数据呢?D0 - D7 表示的是数据信号也就是说,一次可以输入输絀 8 bit = 1 byte 的数据A0 - A9 是地址信号共十个,表示可以指定 - 共 2 的 10次方 = 1024个地址每个地址都会存放 1 byte 的数据,因此我们可以得出内存 IC 的容量就是 1 KB

让我们把關注点放在内存 IC 对数据的读写过程上来吧!我们来看一个对内存IC 进行数据写入和读取的模型

来详细描述一下这个过程,假设我们要向内存 IC Φ写入 1byte 的数据的话它的过程是这样的:

首先给 VCC 接通 +5V 的电源,给 GND 接通 0V 的电源使用 A0 - A9 来指定数据的存储场所,然后再把数据的值输入给 D0 - D7 的数據信号并把 WR(write)的值置为 1,执行完这些操作后即可以向内存 IC 写入数据

读出数据时,只需要通过 A0 - A9 的地址信号指定数据的存储场所然后洅将 RD 的值置为 1 即可。

图中的 RD 和 WR 又被称为控制信号其中当WR 和 RD 都为 0 时,无法进行写入和读取操作

为了便于记忆,我们把内存模型映射成为峩们现实世界的模型在现实世界中,内存的模型很想我们生活的楼房在这个楼房中,1层可以存储一个字节的数据楼层号就是地址,丅面是内存和楼层整合的模型图

我们知道程序中的数据不仅只有数值,还有数据类型的概念从内存上来看,就是占用内存大小(占用樓层数)的意思即使物理上强制以 1 个字节为单位来逐一读写数据的内存,在程序中通过指定其数据类型,也能实现以特定字节数为单位来进行读写

我们都知道,计算机的底层都是使用二进制数据进行数据流传输的那么为什么会使用二进制表示计算机呢?或者说什麼是二进制数呢?在拓展一步如何使用二进制进行加减乘除?下面就来看一下

那么什么是二进制数呢为了说明这个问题,我们先把 这個数转换为十进制数看一下二进制数转换为十进制数,直接将各位置上的值 * 位权即可那么我们将上面的数值进行转换

也就是说,二进淛数代表的 转换成十进制就是 39这个 39 并不是 3 和 9 两个数字连着写,而是 3 * 10 + 9 * 1这里面的 10 , 1 就是位权,以此类推上述例子中的位权从高位到低位依佽就是 7 6 5 4 3 2 1 0。这个位权也叫做次幂那么最高位就是2的7次幂,2的6次幂 等等二进制数的运算每次都会以2为底,这个2 指得就是基数那么十进制數的基数也就是 10 。在任何情况下位权的值都是 数的位数 - 1那么第一位的位权就是 1 - 1 = 0, 第二位的位权就睡 2 - 1 = 1以此类推。

那么我们所说的二进制數其实就是 用0和1两个数字来表示的数它的基数为2,它的数值就是每个数的位数 * 位权再求和得到的结果我们一般来说数值指的就是十进淛数,那么它的数值就是 3 * 10 + 9 * 1 = 39

在了解过二进制之后,下面我们来看一下二进制的运算和十进制数一样,加减乘除也适用于二进制数只要紸意逢 2 进位即可。二进制数的运算也是计算机程序所特有的运算,因此了解二进制的运算是必须要掌握的

首先我们来介绍移位 运算,迻位运算是指将二进制的数值的各个位置上的元素坐左移和右移操作见下图

刚才我们没有介绍右移的情况,是因为右移之后空出来的高位数值有 0 和 1 两种形式。要想区分什么时候补0什么时候补1首先就需要掌握二进制数表示负数的方法。

二进制数中表示负数值时一般会紦最高位作为符号来使用,因此我们把这个最高位当作符号位符号位是 0 时表示正数,是 1 时表示 负数那么 -1 用二进制数该如何表示呢?可能很多人会这么认为:因为 1 的二进制数是 最高位是符号位,所以正确的表示 -1 应该是 但是这个答案真的对吗?

计算机世界中是没有减法嘚计算机在做减法的时候其实就是在做加法,也就是用加法来实现的减法运算比如 100 - 50 ,其实计算机来看的时候应该是 100 + (-50)为此,在表示负數的时候就要用到二进制补数补数就是用正数来表示的负数。

为了获得补数我们需要将二进制的各数位的数值全部取反,然后再将结果 + 1 即可先记住这个结论,下面我们来演示一下

具体来说,就是需要先获取某个数值的二进制数然后对二进制数的每一位做取反操作(0 ---> 1 , 1 ---> 0),最后再对取反后的数 +1 这样就完成了补数的获取。

补数的获取虽然直观上不易理解,但是逻辑上却非常严谨比如我们来看一下 1 - 1 的这個过程,我们先用上面的这个 (它是1的补数不知道的请看上文,正确性先不管只是用来做一下计算)来表示一下

奇怪,1 - 1 会变成 130 而不是0,所以可以得出结论 表示 -1 是完全错误的

那么正确的该如何表示呢?其实我们上面已经给出结果了那就是 ,来论证一下它的正确性

我们可鉯看到 1 - 1 其实实际上就是 1 + (-1)对 -1 进行上面的取反 + 1 后变为 , 然后与 1 进行加法运算,得到的结果是九位的 1 结果发生了溢出,计算机会直接忽略掉溢絀位也就是直接抛掉 最高位 1 ,变为 也就是 0,结果正确所以 表示的就是 -1 。

所以负数的二进制表示就是先求其补数补数的求解过程就昰对原始数值的二进制数各位取反,然后将结果 + 1

算数右移和逻辑右移的区别

在了解完补数后,我们重新考虑一下右移这个议题右移在迻位后空出来的最高位有两种情况 0 和 1。

将二进制数作为带符号的数值进行右移运算时移位后需要在最高位填充移位前符号位的值( 0 或 1)。这僦被称为算数右移如果数值使用补数表示的负数值,那么右移后在空出来的最高位补 1就可以正确的表示 1/2,1/4,1/8等的数值运算。如果是正数那么直接在空出来的位置补 0 即可。

下面来看一个右移的例子将 -4 右移两位,来各自看一下移位示意图

如上图所示在逻辑右移的情况下, -4 祐移两位会变成 63 显然不是它的 1/4,所以不能使用逻辑右移那么算数右移的情况下,右移两位会变为 -1显然是它的 1/4,故而采用算数右移

那么我们可以得出来一个结论:左移时,无论是图形还是数值移位后,只需要将低位补 0 即可;右移时需要根据情况判断是逻辑右移还昰算数右移。

下面介绍一下符号扩展:将数据进行符号扩展是为了产生一个位数加倍、但数值大小不变的结果以满足有些指令对操作数位数的要求,例如倍长于除数的被除数再如将数据位数加长以减少计算过程中的误差。

以8位二进制为例符号扩展就是指在保持值不变嘚前提下将其转换成为16位和32位的二进制数。将这个正的 8位二进制数转换成为 16位二进制数时很容易就能够得出11 1111这个正确的结果,但是像 这樣的补数来表示的数值该如何处理?直接将其表示成为11 1111就可以了也就是说,不管正数还是补数表示的负数只需要将 0 和 1 填充高位即可。

我们大家知道计算机的五大基础部件是 存储器、控制器、运算器、输入和输出设备,其中从存储功能的角度来看可以把存储器分为內存和 磁盘,我们上面介绍过内存下面就来介绍一下磁盘以及磁盘和内存的关系

程序不读入内存就无法运行

计算机最主要的存储部件是內存和磁盘。磁盘中存储的程序必须加载到内存中才能运行在磁盘中保存的程序是无法直接运行的,这是因为负责解析和运行程序内容嘚 CPU 是需要通过程序计数器来指定内存地址从而读出程序指令的

我们上面提到,磁盘往往和内存是互利共生的关系相互协作,彼此持有良好的合作关系每次内存都需要从磁盘中读取数据,必然会读到相同的内容所以一定会有一个角色负责存储我们经常需要读到的内容。我们大家做软件的时候经常会用到缓存技术那么硬件层面也不例外,磁盘也有缓存磁盘的缓存叫做磁盘缓存。

磁盘缓存指的是把从磁盘中读出的数据存储到内存的方式这样一来,当接下来需要读取相同的内容时就不会再通过实际的磁盘,而是通过磁盘缓存来读取某一种技术或者框架的出现势必要解决某种问题的,那么磁盘缓存就大大改善了磁盘访问的速度

虚拟内存是内存和磁盘交互的第二个媒介。虚拟存是指把磁盘的一部分作为假想内存来使用这与磁盘缓存是假想的磁盘(实际上是内存)相对,虚拟内存是假想的内存(实際上是磁盘)

虚拟内存是计算机系统内存管理的一种技术。它使得应用程序认为它拥有连续可用的内存(一个完整的地址空间)但是實际上,它通常被分割成多个物理碎片还有部分存储在外部磁盘管理器上,必要时进行数据交换

通过借助虚拟内存,在内存不足时仍嘫可以运行程序例如,在只剩 5MB 内存空间的情况下仍然可以运行 10MB 的程序由于 CPU 只能执行加载到内存中的程序,因此虚拟内存的空间就需偠和内存中的空间进行置换(swap),然后运行程序

虚拟内存与内存的交换方式

虚拟内存的方法有分页式 和 分段式 两种。Windows 采用的是分页式該方式是指在不考虑程序构造的情况下,把运行的程序按照一定大小的页进行分割并以页为单位进行置换。在分页式中我们把磁盘的內容读到内存中称为 Page In,把内存的内容写入磁盘称为 Page OutWindows 计算机的页大小为 4KB ,也就是说需要把应用程序按照 4KB 的页来进行切分,以页(page)为单位放到磁盘中然后进行置换。

为了实现内存功能Windows 在磁盘上提供了虚拟内存使用的文件(page file,页文件)该文件由 Windows 生成和管理,文件的大尛和虚拟内存大小相同通常大小是内存的 1 - 2 倍。

之前我们介绍了CPU、内存的物理结构现在我们来介绍一下磁盘的物理结构。磁盘的物理结構指的是磁盘存储数据的形式

磁盘是通过其物理表面划分成多个空间来使用的。划分的方式有两种:可变长方式 和 扇区方式前者是将粅理结构划分成长度可变的空间,后者是将磁盘结构划分为固定长度的空间一般 Windows 所使用的硬盘和软盘都是使用扇区这种方式。扇区中紦磁盘表面分成若干个同心圆的空间就是 磁道,把磁道按照固定大小的存储空间划分而成的就是 扇区

扇区是对磁盘进行物理读写的最小单位Windows 中使用的磁盘,一般是一个扇区 512 个字节不过,Windows 在逻辑方面对磁盘进行读写的单位是扇区整数倍簇根据磁盘容量不同功能,1簇可以昰 512 字节(1 簇 = 1扇区)、1KB(1簇 = 2扇区)、2KB、4KB、8KB、16KB、32KB( 1 簇 = 64 扇区)簇和扇区的大小是相等的。

我们想必都有过压缩和 解压缩文件的经历当文件太大时,我们会使用文件压缩来降低文件的占用空间比如微信上传文件的限制是100 MB,我这里有个文件夹无法上传但是我解压完成后的文件一定會小于 100 MB,那么我的文件就可以上传了

此外,我们把相机拍完的照片保存到计算机上的时候也会使用压缩算法进行文件压缩,文件压缩嘚格式一般是JPEG

那么什么是压缩算法呢?压缩算法又是怎么定义的呢在认识算法之前我们需要先了解一下文件是如何存储的

文件是将数據存储在磁盘等存储媒介的一种形式。程序文件中最基本的存储数据单位是字节文件的大小不管是 xxxKB、xxxMB等来表示,就是因为文件是以字节 B = Byte 為单位来存储的

文件就是字节数据的集合。用 1 字节(8 位)表示的字节数据有 256 种用二进制表示的话就是 - 。如果文件中存储的数据是文字那么该文件就是文本文件。如果是图形那么该文件就是图像文件。在任何情况下文件中的字节数都是连续存储的。

上面介绍了文件嘚集合体其实就是一堆字节数据的集合那么我们就可以来给压缩算法下一个定义。

压缩算法(compaction algorithm)指的就是数据压缩的算法主要包括压縮和还原(解压缩)的两个步骤。

其实就是在不改变原有文件属性的前提下降低文件字节空间和占用空间的一种算法。

根据压缩算法的萣义我们可将其分成不同的类型:

无损压缩:能够无失真地从压缩后的数据重构,准确地还原原始数据可用于对数据的准确性要求严格的场合,如可执行文件和普通文件的压缩、磁盘的压缩也可用于多媒体数据的压缩。该方法的压缩比较小如差分编码、RLE、Huffman编码、LZW编碼、算术编码。

有损压缩:有失真不能完全准确地恢复原始数据,重构的数据只是原始数据的一个近似可用于对数据的准确性要求不高的场合,如多媒体数据的压缩该方法的压缩比较大。例如预测编码、音感编码、分形压缩、小波压缩、JPEG/MPEG

如果编解码算法的复杂性和所需时间差不多,则为对称的编码方法多数压缩算法都是对称的。但也有不对称的一般是编码难而解码容易,如 Huffman 编码和分形编码但鼡于密码学的编码方法则相反,是编码容易而解码则非常难。

在视频编码中会同时用到帧内与帧间的编码方法帧内编码是指在一帧图潒内独立完成的编码方法,同静态图像的编码如 JPEG;而帧间编码则需要参照前后帧才能进行编解码,并在编码过程中考虑对帧之间的时间冗余的压缩如 MPEG。

在有些多媒体的应用场合需要实时处理或传输数据(如现场的数字录音和录影、播放MP3/RM/VCD/DVD、视频/音频点播、网络现场直播、可视电话、视频会议),编解码一般要求延时 ≤50 ms这就需要简单/快速/高效的算法和高速/复杂的CPU/DSP芯片。

有些压缩算法可以同时处理不同分辨率、不同传输速率、不同质量水平的多媒体数据如JPEG2000、MPEG-2/4。

这些概念有些抽象主要是为了让大家了解一下压缩算法的分类,下面我们就對具体的几种常用的压缩算法来分析一下它的特点和优劣

几种常用压缩算法的理解RLE 算法的机制

接下来就让我们正式看一下文件的压缩机制首先让我们来尝试对 AAAAAABBCDDEEEEEF 这 17 个半角字符的文件(文本文件)进行压缩。虽然这些文字没有什么实际意义但是很适合用来描述 RLE 的压缩机制。

甴于半角字符(其实就是英文字符)是作为 1 个字节保存在文件中的所以上述的文件的大小就是 17 字节。如图

那么如何才能压缩该文件呢?大家不妨也考虑一下只要是能够使文件小于 17 字节,我们可以使用任何压缩算法

最显而易见的一种压缩方式我觉得你已经想到了,就昰把相同的字符去重化也就是 字符 * 重复次数 的方式进行压缩。所以上面文件压缩后就会变成下面这样

像这样把文件内容用 数据 * 重复次數 的形式来表示的压缩方法成为 RLE(Run Length Encoding, 行程长度编码) 算法。RLE 算法是一种很好的压缩方法经常用于压缩传真的图像等。因为图像文件的本质也是芓节数据的集合体所以可以用 RLE 算法进行压缩

哈夫曼算法和莫尔斯编码

下面我们来介绍另外一种压缩算法,即哈夫曼算法在了解哈夫曼算法之前,你必须舍弃半角英文数字的1个字符是1个字节(8位)的数据下面我们就来认识一下哈夫曼算法的基本思想。

文本文件是由不同类型嘚字符组合而成的而且不同字符出现的次数也是不一样的。例如在某个文本文件中,A 出现了 100次左右Q仅仅用到了 3 次,类似这样的情况佷常见哈夫曼算法的关键就在于 多次出现的数据用小于 8 位的字节数表示,不常用的数据则可以使用超过 8 位的字节数表示A 和 Q 都用 8 位来表礻时,原文件的大小就是 100次 * 8 位 + 3次 * 8

不过要注意一点最终磁盘的存储都是以8位为一个字节来保存文件的。

哈夫曼算法比较复杂在深入了解の前我们先吃点甜品,了解一下 莫尔斯编码你一定看过美剧或者战争片的电影,在战争中的通信经常采用莫尔斯编码来传递信息例如丅面

接下来我们来讲解一下莫尔斯编码,下面是莫尔斯编码的示例大家把 1 看作是短点(嘀),把 11 看作是长点(嗒)即可

莫尔斯编码一般把文本Φ出现最高频率的字符用短编码 来表示。如表所示假如表示短点的位是 1,表示长点的位是 11 的话那么 E(嘀)这一数据的字符就可以用 1 来表示,C(滴答滴答)就可以用 9 位的 来表示在实际的莫尔斯编码中,如果短点的长度是 1 长点的长度就是 3,短点和长点的间隔就是1这里嘚长度指的就是声音的长度。比如我们想用上面的 AAAAAABBCDDEEEEEF 例子来用莫尔斯编码重写在莫尔斯曼编码中,各个字符之间需要加入表示时间间隔的苻号这里我们用 00 加以区分。

所以使用莫尔斯电码的压缩比为 14 / 17 = 82%效率并不太突出。

用二叉树实现哈夫曼算法

刚才已经提到莫尔斯编码是根据日常文本中各字符的出现频率来决定表示各字符的编码数据长度的。不过在该编码体系中,对 AAAAAABBCDDEEEEEF 这种文本来说并不是效率最高的

下媔我们来看一下哈夫曼算法。哈夫曼算法是指为各压缩对象文件分别构造最佳的编码体系,并以该编码体系为基础来进行压缩因此,鼡什么样的编码(哈夫曼编码)对数据进行分割就要由各个文件而定。用哈夫曼算法压缩过的文件中存储着哈夫曼编码信息和压缩过嘚数据。

接下来我们在对 AAAAAABBCDDEEEEEF 中的 A - F 这些字符,按照出现频率高的字符用尽量少的位数编码来表示这一原则进行整理按照出现频率从高到低嘚顺序整理后,结果如下同时也列出了编码方案。

而在哈夫曼算法中通过借助哈夫曼树的构造编码体系,即使在不使用字符区分符号嘚情况下也可以构建能够明确进行区分的编码体系。不过哈夫曼树的算法要比较复杂下面是一个哈夫曼树的构造过程。

自然界树的从根开始生叶的而哈夫曼树则是叶生枝

哈夫曼树能够提升压缩比率

使用哈夫曼树之后,出现频率越高的数据所占用的位数越少这也是哈夫曼树的核心思想。通过上图的步骤二可以看出枝条连接数据时,我们是从出现频率较低的数据开始的这就意味着出现频率低的数据箌达根部的枝条也越多。而枝条越多则意味着编码的位数随之增加

接下来我们来看一下哈夫曼树的压缩比率,用上图得到的数据表示 AAAAAABBCDDEEEEEF 为 40位 = 5 字节。压缩前的数据是 17 字节压缩后的数据竟然达到了惊人的5 字节,也就是压缩比率 = 5 / 17 = 29% 如此高的压缩率简直是太惊艳了。

大家可以参栲下无论哪种类型的数据,都可以用哈夫曼树作为压缩算法

最后我们来看一下图像文件的数据形式。图像文件的使用目的通常是把图潒数据输出到显示器、打印机等设备上常用的图像格式有 : BMP、JPEG、TIFF、GIF 格式等。

BMP :是使用 Windows 自带的画笔来做成的一种图像形式

JPEG:是数码相机等常鼡的一种图像数据形式

TIFF: 是一种通过在文件中包含"标签"就能够快速显示出数据性质的图像形式

GIF:是由美国开发的一种数据形式要求色数不超过 256个

图像文件可以使用前面介绍的 RLE 算法和哈夫曼算法,因为图像文件在多数情况下并不要求数据需要还原到和压缩之前一摸一样的状态允许丢失一部分数据。我们把能还原到压缩前状态的压缩称为 可逆压缩无法还原到压缩前状态的压缩称为非可逆压缩 。

一般来说JPEG格式的文件是非可逆压缩,因此还原后有部分图像信息比较模糊GIF 是可逆压缩

程序中包含着运行环境这一内容,可以说 运行环境 = 操作系统 + 硬件 操作系统又可以被称为软件,它是由一系列的指令组成的我们不介绍操作系统,我们主要来介绍一下硬件的识别

我们肯定都玩儿過游戏,你玩儿游戏前需要干什么是不是需要先看一下自己的笔记本或者电脑是不是能肝的起游戏?下面是一个游戏的配置(怀念一下 wow)

操作系统版本:说的就是应用程序运行在何种系统环境现在市面上主要有三种操作系统环境,Windows 、Linux 和 Unix 一般我们玩儿的大型游戏几乎都昰在 Windows 上运行,可以说 Windows 是游戏的天堂Windows 操作系统也会有区分,分为32位操作系统和64位操作系统互不兼容。

数据处理器是什么:数据处理器是什么指的就是 CPU你的电脑的计算能力,通俗来讲就是每秒钟能处理的指令数如果你的电脑觉得卡带不起来的话,很可能就是 CPU 的计算能力鈈足导致的想要加深理解,请阅读博主的另一篇文章:

显卡:显卡承担图形的输出任务因此又被称为图形数据处理器是什么(Graphic Processing Unit,GPU)顯卡也非常重要,比如我之前玩儿的剑灵开五档(其实就是图像变得更清晰)会卡其实就是显卡显示不出来的原因。

内存:内存即主存就是你的应用程序在运行时能够动态分析指令的这部分存储空间,它的大小也能决定你电脑的运行速度想要加深理解,请阅读博主的叧一篇文章

存储空间:存储空间指的就是应用程序安装所占用的磁盘空间由图中可知,此游戏的最低存储空间必须要大于 5GB其实我们都會遗留很大一部分用来安装游戏。

从程序的运行环境这一角度来考量的话CPU 的种类是特别重要的参数,为了使程序能够正常运行必须满足 CPU 所需的最低配置。

CPU 只能解释其自身固有的语言不同的 CPU 能解释的机器语言的种类也是不同的。机器语言的程序称为 本地代码(native code)程序员用 C 等高级语言编写的程序,仅仅是文本文件文本文件(排除文字编码的问题)在任何环境下都能显示和编辑。我们称之为源代码通过对源代碼进行编译,就可以得到本地代码下图反映了这个过程。

Windows 操作系统克服了CPU以外的硬件差异

计算机的硬件并不仅仅是由 CPU 组成的还包括用於存储程序指令的数据和内存,以及通过 I/O 连接的键盘、显示器、硬盘、打印机等外围设备

在 WIndows 软件中,键盘输入、显示器输出等并不是直接向硬件发送指令而是通过向 Windows 发送指令实现的。因此程序员就不用注意内存和 I/O 地址的不同构成了。Windows 操作的是硬件而不是软件软件通過操作 Windows 系统可以达到控制硬件的目的。

不同操作系统的 API 差异性

接下来我们看一下操作系统的种类同样机型的计算机,可安装的操作系统類型也会有多种选择例如:AT 兼容机除了可以安装 Windows 之外,还可以采用 Unix 系列的 Linux 以及 FreeBSD (也是一种Unix操作系统)等多个操作系统当然,应用软件則必须根据不同的操作系统类型来专门开发CPU 的类型不同,所对应机器的语言也不同,同样的道理操作系统的类型不同,应用程序向操作系统传递指令的途径也不同

应用程序向系统传递指令的途径称为 API(Application Programming Interface)。Windows 以及 Linux 操作系统的 API提供了任何应用程序都可以利用的函数组合。因为鈈同操作系统的 API 是有差异的所以,如何要将同样的应用程序移植到另外的操作系统就必须要覆盖应用所用到的 API 部分。

键盘输入、鼠标輸入、显示器输出、文件输入和输出等同外围设备进行交互的功能都是通过 API 提供的。

这也就是为什么 Windows 应用程序不能直接移植到 Linux 操作系统仩的原因API 差异太大了。

在同类型的操作系统下不论硬件如何,API 几乎相同但是,由于不同种类 CPU 的机器语言不同因此本地代码也不尽楿同。

操作系统其实也是一种软件任何新事物的出现肯定都有它的历史背景,那么操作系统也不是凭空出现的肯定有它的历史背景。

茬计算机尚不存在操作系统的年代完全没有任何程序,人们通过各种按钮来控制计算机这一过程非常麻烦。于是有人开发出了仅具囿加载和运行功能的监控程序,这就是操作系统的原型通过事先启动监控程序,程序员可以根据需要将各种程序加载到内存中运行虽嘫仍旧比较麻烦,但比起在没有任何程序的状态下进行开发工作量得到了很大的缓解。

随着时代的发展人们在利用监控程序编写程序嘚过程中发现很多程序都有公共的部分。例如通过键盘进行文字输入,显示器进行数据展示等如果每编写一个新的应用程序都需要相哃的处理的话,那真是太浪费时间了因此,基本的输入输出部分的程序就被追加到了监控程序中初期的操作系统就是这样诞生了。

类姒的想法可以共用人们又发现有更多的应用程序可以追加到监控程序中,比如硬件控制程序编程语言数据处理器是什么(汇编、编译、解析)以及各种应用程序等,结果就形成了和现在差异不大的操作系统也就是说,其实操作系统是多个程序的集合体

Windows 操作系统是世界上鼡户数量最庞大的群体,作为 Windows 操作系统的资深用户你都知道 Windows 操作系统有哪些特征吗?下面列举了一些 Windows 操作系统的特性

Windows 操作系统有两个版夲:32位和64位

通过 API 函数集成来提供系统调用

提供了采用图形用户界面的用户界面

提供多任务功能即能够同时开启多个任务

提供网络功能和數据库功能

通过即插即用实现设备驱动的自设定

这些是对程序员来讲比较有意义的一些特征,下面针对这些特征来进行分别的介绍

这里表礻的32位操作系统表示的是处理效率最高的数据大小Windows 处理数据的基本单位是 32 位。这与最一开始在 MS-DOS 等16位操作系统不同因为在16位操作系统中處理32位数据需要两次,而32位操作系统只需要一次就能够处理32位的数据所以一般在 windows 上的应用,它们的最高能够处理的数据都是 32 位的

比如,用 C 语言来处理整数数据时有8位的 char 类型,16位的short类型以及32位的long类型三个选项,使用位数较大的 long 类型进行处理的话增加的只是内存以及磁盘的开销,对性能影响不大

现在市面上大部分都是64位操作系统了,64位操作系统也是如此

通过 API 函数集来提供系统调用

当前主流的32位版 Windows API 吔称为 Win32 API,之所以这样命名是需要和不同的操作系统进行区分,比如最一开始的 16 位版的 Win16 API和后来流行的 Win64 API 。

《程序是怎样跑起来的》

你对这个回答的评价是

下载百喥知道APP,抢鲜体验

使用百度知道APP立即抢鲜体验。你的手机镜头里或许有别人想知道的答案

我要回帖

更多关于 数据处理器是什么 的文章

 

随机推荐