淺談Linux內存管理機制

常常遇到一些剛接觸Linux的新手會問內存佔用怎麼那麼多？
在Linux中常常發現空閒內存不多，彷佛全部的內存都被系統佔用了，表面感受是內存不夠用了，其實否則。這是Linux內存管理的一個優秀特性，在這方 面，區別於Windows的內存管理。主要特色是，不管物理內存有多大，Linux 都將其充份利用，將一些程序調用過的硬盤數據讀入內存，利用內存讀寫的高速特性來提升Linux系統的數據訪問性能。而Windows是隻在須要內存時， 才爲應用程序分配內存，並不能充分利用大容量的內存空間。換句話說，每增長一些物理內存，Linux都將能充分利用起來，發揮了硬件投資帶來的好處，而 Windows只將其作爲擺設，即便增長8GB甚至更大。

Linux的這一特性，主要是利用空閒的物理內存，劃分出一部份空間，作爲cache、buffers ，以此提升數據訪問性能。

頁高速緩存(cache)是Linux內核實現的一種主要磁盤緩存。它主要用來減小對磁盤的I/O操做。具體地講，是經過把磁盤中的數據緩存到物理內存中，把對磁盤的訪問變爲對物理 內存的訪問。

磁盤高速緩存的價值在於兩個方面：第一，訪問磁盤的速度要遠遠低於訪問內存的速度，所以，從內存訪問數據比從磁盤訪問速度更快。第二，數據一旦被訪 問，就頗有可能在短時間內再次被訪問到。

下面來了解下Linux內存管理機制：
一 物理內存和虛擬內存
咱們知道，直接從物理內存讀寫數據要比從硬盤讀寫數據要快的多，所以，咱們但願全部數據的讀取和寫入都在內存完成，而內存是有限的，這樣就引出了物理內存與虛擬內存的概念。

物理內存就是系統硬件提供的內存大小，是真正的內存，相對於物理內存，在linux下還有一個虛擬內存的概念，虛擬內存就是爲了知足物理內存的不足而提出的策略，它是利用磁盤空間虛擬出的一塊邏輯內存，用做虛擬內存的磁盤空間被稱爲交換空間（Swap Space）。

做爲物理內存的擴展，linux會在物理內存不足時，使用交換分區的虛擬內存，更詳細的說，就是內核會將暫時不用的內存塊信息寫到交換空間，這樣以來，物理內存獲得了釋放，這塊內存就能夠用於其它目的，當須要用到原始的內容時，這些信息會被從新從交換空間讀入物理內存。

Linux的內存管理採起的是分頁存取機制，爲了保證物理內存能獲得充分的利用，內核會在適當的時候將物理內存中不常用的數據塊自動交換到虛擬內存中，而將常用的信息保留到物理內存。

要深刻了解linux內存運行機制，須要知道下面提到的幾個方面：

1. Linux系統會不時的進行頁面交換操做，以保持儘量多的空閒物理內存，即便並無什麼事情須要內存，Linux也會交換出暫時不用的內存頁面。這能夠避免等待交換所需的時間。
2. Linux進行頁面交換是有條件的，不是全部頁面在不用時都交換到虛擬內存，linux內核根據」最近最常用「算法，僅僅將一些不常用的頁面文件 交換到虛擬內存，有時咱們會看到這麼一個現象：linux物理內存還有不少，可是交換空間也使用了不少。其實，這並不奇怪，例如，一個佔用很大內存的進程 運行時，須要耗費不少內存資源，此時就會有一些不經常使用頁面文件被交換到虛擬內存中，但後來這個佔用不少內存資源的進程結束並釋放了不少內存時，剛纔被交換 出去的頁面文件並不會自動的交換進物理內存，除非有這個必要，那麼此刻系統物理內存就會空閒不少，同時交換空間也在被使用，就出現了剛纔所說的現象了。關 於這點，不用擔憂什麼，只要知道是怎麼一回事就能夠了。
3. 交換空間的頁面在使用時會首先被交換到物理內存，若是此時沒有足夠的物理內存來容納這些頁面，它們又會被立刻交換出去，如此以來，虛擬內存中可能沒有足夠 空間來存儲這些交換頁面，最終會致使linux出現假死機、服務異常等問題，linux雖然能夠在一段時間內自行恢復，可是恢復後的系統已經基本不可用 了。

所以，合理規劃和設計Linux內存的使用，是很是重要的.

二 內存的監控
做爲一名Linux系統管理員，監控內存的使用狀態是很是重要的，經過監控有助於瞭解內存的使用狀態，好比內存佔用是否正常，內存是否緊缺等等，監控內存最常使用的命令有free、top等，下面是某個系統free的輸出：

[root@linuxeye ~]# free
             total       used       free     shared    buffers     cached
Mem:389403634735444204920729721332348-/+ buffers/cache:20682241825812Swap:40959929060363189956

每一個選項的含義：
第一行：
total：物理內存的總大小
used：已經使用的物理內存大小
free：空閒的物理內存大小
shared：多個進程共享的內存大小
buffers/cached：磁盤緩存的大小

第二行Mem：表明物理內存使用狀況
第三行(-/+ buffers/cached)：表明磁盤緩存使用狀態
第四行：Swap表示交換空間內存使用狀態

free命令輸出的內存狀態，能夠經過兩個角度來查看：一個是從內核的角度來看，一個是從應用層的角度來看的

從內核的角度來查看內存的狀態
就是內核目前能夠直接分配到，不須要額外的操做，即爲上面free命令輸出中第二行Mem項的值，能夠看出，此係統物理內存有3894036K，空閒的內存只有420492K，也就是40M多一點，咱們來作一個這樣的計算：
3894036 – 3473544 = 420492
其實就是總的物理內存減去已經使用的物理內存獲得的就是空閒的物理內存大小，注意這裏的可用內存值420492並不包含處於buffers和cached狀態的內存大小。
若是你認爲這個系統空閒內存過小，那你就錯了，實際上，內核徹底控制着內存的使用狀況，Linux會在須要內存的時候，或在系統運行逐步推動時，將buffers和cached狀態的內存變爲free狀態的內存，以供系統使用。

從應用層的角度來看系統內存的使用狀態
也就是Linux上運行的應用程序可使用的內存大小，即free命令第三行 -/+ buffers/cached 的輸出，能夠看到，此係統已經使用的內存才2068224K，而空閒的內存達到1825812K，繼續作這樣一個計算：
420492＋（72972＋1332348）＝1825812
經過這個等式可知，應用程序可用的物理內存值是Mem項的free值加上buffers和cached值之和，也就是說，這個free值是包括buffers和cached項大小的，對於應用程序來講，buffers/cached佔有的內存是可用的，由於buffers/cached是爲了提升文件讀取的性能，當應用程序須要用到內存的時候，buffers/cached會很快地被回收，以供應用程序使用。

buffers與cached的異同
在Linux 操做系統中，當應用程序須要讀取文件中的數據時，操做系統先分配一些內存，將數據從磁盤讀入到這些內存中，而後再將數據分發給應用程序；當須要往文件中寫 數據時，操做系統先分配內存接收用戶數據，而後再將數據從內存寫到磁盤上。然而，若是有大量數據須要從磁盤讀取到內存或者由內存寫入磁盤時，系統的讀寫性 能就變得很是低下，由於不管是從磁盤讀數據，仍是寫數據到磁盤，都是一個很消耗時間和資源的過程，在這種狀況下，Linux引入了buffers和 cached機制。

buffers與cached都是內存操做，用來保存系統曾經打開過的文件以及文件屬性信息，這樣當操做系統須要讀取某些文件時，會首先在 buffers與cached內存區查找，若是找到，直接讀出傳送給應用程序，若是沒有找到須要數據，才從磁盤讀取，這就是操做系統的緩存機制，經過緩 存，大大提升了操做系統的性能。但buffers與cached緩衝的內容倒是不一樣的。

buffers是用來緩衝塊設備作的，它只記錄文件系統的元數據（metadata）以及 tracking in-flight pages，而cached是用來給文件作緩衝。更通俗一點說：buffers主要用來存放目錄裏面有什麼內容，文件的屬性以及權限等等。而cached直接用來記憶咱們打開過的文件和程序。

爲了驗證咱們的結論是否正確，能夠經過vi打開一個很是大的文件，看看cached的變化，而後再次vi這個文件，感受一下兩次打開的速度有何異同，是否是第二次打開的速度明顯快於第一次呢？
接着執行下面的命令：

find /*-name  *.conf

看看buffers的值是否變化，而後重複執行find命令，看看兩次顯示速度有何不一樣。

Linux操做系統的內存運行原理，很大程度上是根據服務器的需求來設計的，例如系統的緩衝機制會把常用到的文件和數據緩存在cached 中，linux老是在力求緩存更多的數據和信息，這樣再次須要這些數據時能夠直接從內存中取，而不須要有一個漫長的磁盤操做，這種設計思路提升了系統的整 體性能。

深刻理解Linux內存管理機制：http://www.linuxeye.com/Linux/1931.html

轉自：http://blog.linuxeye.com/362.html