Linux命令 之 free （buffer与cache区别 ）

原文：http://zhumeng8337797.blog.163.com/blog/static/100768914201110244740147/   点击打开链接

从本质上讲，

    buffer（缓冲）是为了提高内存和硬盘（或其他I/O设备）之间的数据交换的速度而设计的。 
    cache（缓存）是为了提高cpu和内存之间的数据交换速度而设计的，也就是平常见到的一级缓存、二级缓存、三级缓存。（top命令中查看的cache不是指一级缓存/二级缓存/三级缓存，而是指Cache Memory）

buffer:

   缓冲区，一个用于存储速度不同步的设备或优先级不同的设备之间传输数据的区域。通过缓冲区，可以使进程之间的相互等待变少，从而使从速度慢的设备读入数据时，速度快的设备的操作进程不发生间断。

cache:

   当你读写文件的时候，Linux内核为了提高读写性能与速度，会将文件在内存中进行缓存，这部分内存就是Cache Memory(缓存内存)。即使你的程序运行结束后，Cache Memory也不会自动释放。这就会导致你在Linux系统中程序频繁读写文件后，你会发现可用物理内存会很少。其实这缓存内存(Cache Memory)在你需要使用内存的时候会自动释放，所以你不必担心没有内存可用。如果你希望手动去释放Cache Memory也是有办法的。

一、free命令

free 命令相对于top 提供了更简洁的查看系统内存使用情况，用来显示内存的使用情况，使用权限是所有用户
语法：
     free [-b|-k|-m|-g] [-l] [-o] [-t] [-s delay] [-c count] [-V]
常用参数详解
-b， -k，-m，-g：分别以字节（ bytes、KB、MB、GB）为单位显示内存使用情况
-s  delay：显示每隔多少秒数来显示一次内存使用情况（与-c一起使用）
-c：按每隔几秒显示内存使用情况时的刷新次数（与-s一起使用）
-t：显示内存总和列。
-o：不显示缓冲区调节列
-V：free的版本
　　# free -m
                   total       used     free     shared    buffers     cached
Mem:          3034      2938      96           0          101          1300
-/+ buffers/cache:   1536       1497
Swap:         1983      71        1912
Total:         5018       3010     2008
　　Mem：表示物理内存统计
　　-/+ buffers/cached：表示物理内存的缓存统计
　　Swap：表示硬盘上交换分区的使用情况，这里我们不去关心。
　　系统的总物理内存：3034M，但系统当前真正可用的内存并不是第一行free 标记的 96M，它仅代表未被分配的内存。
　　我们使用total1、used1、free1、used2、free2 等名称来代表上面统计数据的各值，1、2 分别代表第一行和第二行的数据。
　　total1：表示物理内存总量。
　　used1：表示总计分配给缓存（包含buffers 与cache ）使用的数量，但其中可能部分缓存并未实际使用。
　　free1：未被分配的内存。
　　shared1：共享内存，一般系统不会用到，这里也不讨论。
　　buffers1：系统分配但未被使用的buffers 数量。
　　cached1：系统分配但未被使用的cache 数量。buffer 与cache 的区别见后面。
　　used2：实际使用的buffers 与cache 总量，也是实际使用的内存总量。
　　free2：未被使用的buffers 与cache 和未被分配的内存之和，这就是系统当前实际可用内存。
　　可以整理出如下等式：
      total1 = used1 + free1
      total1 = used2 + free2
      used1 = buffers1 + cached1 + used2
      free2 = buffers1 + cached1 + free1

二、buffer与cache的区别

理解linux内存管理，需要深入了解linux内存的各个参数含义和规则，下面介绍一下Linux操作系统中内存buffer和cache的区别。

buffer 与cache 的区别：
A buffer is something that has yet to be "written" to disk. A cache is something that has been "read" from the disk and stored for later use.

更详细的解释参考：Difference Between Buffer and Cache

Cache：高速缓存，是位于CPU与主内存间的一种容量较小但速度很高的存储器。由于CPU的速度远高于主内存，CPU直接从内存中存取数据要等待一定时间周期，Cache中保存着CPU刚用过或循环使用的一部分数据，当CPU再次使用该部分数据时可从Cache中直接调用,这样就减少了CPU的等待时间,提高了系统的效率。Cache又分为一级Cache(L1 Cache)和二级Cache(L2 Cache)，L1 Cache集成在CPU内部，L2 Cache早期一般是焊在主板上,现在也都集成在CPU内部，常见的容量有256KB或512KB L2 Cache。

Buffer：缓冲区，一个用于存储速度不同步的设备或优先级不同的设备之间传输数据的区域。通过缓冲区，可以使进程之间的相互等待变少，从而使从速度慢的设备读入数据时，速度快的设备的操作进程不发生间断。

Free中的buffer和cache：（它们都是占用内存）：

buffer : 作为buffer cache的内存，是块设备的读写缓冲区
cache: 作为page cache的内存, 文件系统的cache

如果 cache 的值很大，说明cache住的文件数很多。如果频繁访问到的文件都能被cache住，那么磁盘的读IO bi会非常小。

对于共享内存（Shared memory），主要用于在UNIX 环境下不同进程之间共享数据，是进程间通信的一种方法，一般的应用程序不会申请使用共享内存，笔者也没有去验证共享内存对上面等式的影响。如果你有兴趣，请参考：What is Shared Memory?

我们使用的Linux和Windows可不太一样，用top命令得出来的可能不是真实使用的内存，用free命令第二行才是系统真实使用的内存。如 果发现PHP-CGI把你的内存占满了可不要惊慌哦。

Page cache和buffer cache一直以来是两个比较容易混淆的概念，在网上也有很多人在争辩和猜想这两个cache到底有什么区别，讨论到最后也一直没有一个统一和正确的结 论，在我工作的这一段时间，page cache和buffer cache的概念曾经困扰过我，但是仔细分析一下，这两个概念实际上非常的清晰。如果能够了解到这两个cache的本质，那么我们在分析io问题的时候可 能会更加得心应手。

Page cache实际上是针对文件系统的，是文件的缓存，在文件层面上的数据会缓存到page cache。文件的逻辑层需要映射到实际的物理磁盘，这种映射关系由文件系统来完成。当page cache的数据需要刷新时，page cache中的数据交给buffer cache，但是这种处理在2.6版本的内核之后就变的很简单了，没有真正意义上的cache操作。

Buffer cache是针对磁盘块的缓存，也就是在没有文件系统的情况下，直接对磁盘进行操作的数据会缓存到buffer cache中，例如，文件系统的元数据都会缓存到buffer cache中。
简单说来，page cache用来缓存文件数据，buffer cache用来缓存磁盘数据。在有文件系统的情况下，对文件操作，那么数据会缓存到page cache，如果直接采用dd等工具对磁盘进行读写，那么数据会缓存到buffer cache。
补充一点，在文件系统层 每个设备都会分配一个def_blk_ops的文件操作方法，这是设备的操作方法，在每个设备的inode下面会存在一个 radix tree，这个radix tree下面将会放置缓存数据的page页。这个page的数量将会在top程序的buffer一栏中显示。如果设备做了文件系统，那么会生成一个 inode，这个inode会分配ext3_ops之类的操作方法，这些方法是文件系统的方法，在这个inode下面同样存在一个radix tree，这里会缓存文件的page页，缓存页的数量在top程序的cache一栏进行统计。从上面的分析可以看出，2.6内核中的buffer cache和page cache在处理上是保持一致的，但是存在概念上的差别，page cache针对文件的cache，buffer是针对磁盘块数据的cache，仅此而已。

现在不都是只有page cache了吗？ buffer pages其实也是page cache里面的页。只是多了一层抽象，通过buffer_head来进行一些访问管理。对，从Linux算法实现的角度，page cache和buffer cache目前是一样的，但是从功能抽象和具体应用来讲，这两者还是存在区别的，这一点可以从top工具的统计信息中看得出来，关注一下buffer和 cache这两个统计量。
增加一些资料：
A buffer is something that has yet to be “written” to disk. A cache is something that has been “read” from the disk and stored for later use.