Linux記憶體機制以及手動釋放swap和記憶體

来源:https://www.cnblogs.com/Zfc-Cjk/archive/2018/02/13/8447270.html
-Advertisement-
Play Games

今天我們來談談Linux的記憶體機制。 首先我們理一下概念 一、什麼是linux的記憶體機制? 我們知道,直接從物理記憶體讀寫數據要比從硬碟讀寫數據要快的多,因此,我們希望所有數據的讀取和寫入都在記憶體完成,而記憶體是有限的,這樣就引出了物理記憶體與虛擬記憶體的概念。物理記憶體就是系統硬體提供的記憶體大小,是真正的內 ...


今天我們來談談Linux的記憶體機制。

首先我們理一下概念

一、什麼是linux的記憶體機制?

我們知道,直接從物理記憶體讀寫數據要比從硬碟讀寫數據要快的多,因此,我們希望所有數據的讀取和寫入都在記憶體完成,而記憶體是有限的,這樣就引出了物理記憶體與虛擬記憶體的概念。

物理記憶體就是系統硬體提供的記憶體大小,是真正的記憶體,相對於物理記憶體,在linux下還有一個虛擬記憶體的概念,虛擬記憶體就是為了滿足物理記憶體的不足而提出的策略,它是利用磁碟空間虛擬出的一塊邏輯記憶體,用作虛擬記憶體的磁碟空間被稱為交換空間(Swap Space)。

作為物理記憶體的擴展,linux會在物理記憶體不足時,使用交換分區的虛擬記憶體,更詳細的說,就是內核會將暫時不用的記憶體塊信息寫到交換空間,這樣以來,物理記憶體得到了釋放,這塊記憶體就可以用於其它目的,當需要用到原始的內容時,這些信息會被重新從交換空間讀入物理記憶體。

Linux的記憶體管理採取的是分頁存取機制,為了保證物理記憶體能得到充分的利用,內核會在適當的時候將物理記憶體中不經常使用的數據塊自動交換到虛擬記憶體中,而將經常使用的信息保留到物理記憶體。

要深入瞭解linux記憶體運行機制,需要知道下麵提到的幾個方面:

  1. Linux系統會不時的進行頁面交換操作,以保持儘可能多的空閑物理記憶體,即使並沒有什麼事情需要記憶體,Linux也會交換出暫時不用的記憶體頁面。這可以避免等待交換所需的時間。

  2. Linux 進行頁面交換是有條件的,不是所有頁面在不用時都交換到虛擬記憶體,linux內核根據”最近最經常使用“演算法,僅僅將一些不經常使用的頁面文件交換到虛擬 記憶體,有時我們會看到這麼一個現象:linux物理記憶體還有很多,但是交換空間也使用了很多。其實,這並不奇怪,例如,一個占用很大記憶體的進程運行時,需 要耗費很多記憶體資源,此時就會有一些不常用頁面文件被交換到虛擬記憶體中,但後來這個占用很多記憶體資源的進程結束並釋放了很多記憶體時,剛纔被交換出去的頁面 文件並不會自動的交換進物理記憶體,除非有這個必要,那麼此刻系統物理記憶體就會空閑很多,同時交換空間也在被使用,就出現了剛纔所說的現象了。關於這點,不 用擔心什麼,只要知道是怎麼一回事就可以了。

  3. 交換空間的頁面在使用時會首先被交換到物理記憶體,如果此時沒有足夠的物理記憶體來容納這些頁 面,它們又會被馬上交換出去,如此以來,虛擬記憶體中可能沒有足夠空間來存儲這些交換頁面,最終會導致linux出現假死機、服務異常等問題,linux雖 然可以在一段時間內自行恢復,但是恢復後的系統已經基本不可用了。

因此,合理規劃和設計Linux記憶體的使用,是非常重要的.

在Linux 操作系統中,當應用程式需要讀取文件中的數據時,操作系統先分配一些記憶體,將數據從磁碟讀入到這些記憶體中,然後再將數據分發給應用程式;當需要往文件中寫 數據時,操作系統先分配記憶體接收用戶數據,然後再將數據從記憶體寫到磁碟上。然而,如果有大量數據需要從磁碟讀取到記憶體或者由記憶體寫入磁碟時,系統的讀寫性 能就變得非常低下,因為無論是從磁碟讀數據,還是寫數據到磁碟,都是一個很消耗時間和資源的過程,在這種情況下,Linux引入了buffers和 cached機制。

buffers與cached都是記憶體操作,用來保存系統曾經打開過的文件以及文件屬性信息,這樣當操作系統需要讀取某些文件時,會首先在buffers 與cached記憶體區查找,如果找到,直接讀出傳送給應用程式,如果沒有找到需要數據,才從磁碟讀取,這就是操作系統的緩存機制,通過緩存,大大提高了操 作系統的性能。但buffers與cached緩衝的內容卻是不同的。

buffers是用來緩衝塊設備做的,它只記錄文件系統的元數據(metadata)以及 tracking in-flight pages,而cached是用來給文件做緩衝。更通俗一點說:buffers主要用來存放目錄裡面有什麼內容,文件的屬性以及許可權等等。而cached直接用來記憶我們打開過的文件和程式。

為了驗證我們的結論是否正確,可以通過vi打開一個非常大的文件,看看cached的變化,然後再次vi這個文件,感覺一下兩次打開的速度有何異同,是不是第二次打開的速度明顯快於第一次呢?
接著執行下麵的命令:

find /* -name  *.conf

看看buffers的值是否變化,然後重覆執行find命令,看看兩次顯示速度有何不同。

 

 

二、linux什麼時候開始使用虛擬記憶體(swap)?

A.[root@wenwen ~]# cat /proc/sys/vm/swappiness

60

上面這個60代表物理記憶體在使用60%的時候才會使用swap

swappiness=0的時候表示最大限度使用物理記憶體,然後才是 swap空間,

swappiness=100的時候表示積極的使用swap分區,並且把記憶體上的數據及時的搬運到swap空間裡面。

通常情況下:

swap分區設置建議是記憶體的兩倍 (記憶體小於等於4G時),如果記憶體大於4G,swap只要比記憶體大就行。另外儘量的將swappiness調低,這樣系統的性能會更好。

B.修改swappiness參數

臨時性修改:

[root@wenwen ~]# sysctl vm.swappiness=10

vm.swappiness = 10

[root@wenwen ~]# cat /proc/sys/vm/swappiness                 

10

 

永久性修改:

[root@wenwen ~]# vim /etc/sysctl.conf

加入參數:

vm.swappiness = 35

然後在直接:

[root@wenwen ~]# sysctl -p

查看是否生效:

cat /proc/sys/vm/swappiness

35

 

 

 

三、怎麼釋放記憶體?

一般系統是不會自動釋放記憶體的

關鍵的配置文件/proc/sys/vm/drop_caches。這個文件中記錄了緩存釋放的參數,預設值為0,也就是不釋放緩存。他的值可以為0~3之間的任意數字,代表著不同的含義:

0 – 不釋放
1 – 釋放頁緩存
2 – 釋放dentries和inodes
3 – 釋放所有緩存

實操:

 

wKiom1kIfqfCWjMwAABa_PWXhZ8253.png-wh_50

很明顯多出來很多空閑的記憶體了吧

 

 

四、怎麼釋放swap?

前提:首先要保證記憶體剩餘要大於等於swap使用量,否則會宕機!根據記憶體機制,swap分區一旦釋放,所有存放在swap分區的文件都會轉存到物理記憶體上。通常通過重新掛載swap分區完成釋放swap。

a.查看當前swap分區掛載在哪?

wKioL1kIg_-QgRPNAAAc0YY8hDs713.png-wh_50

b.關停這個分區

wKiom1kIhCjzKPz0AAAJ4nqUEqM343.png-wh_50

c.查看狀態:

wKioL1kIhEuQnJNsAAARrgqCj1I720.png-wh_50

d.查看swap分區是否關停,最下麵一行顯示全0wKioL1kIhGPAeVG_AAAmRTAqcso981.png-wh_50

e.將swap掛載到/dev/sda5上

wKiom1kIhL-DWuyLAAAJq9dwCWk401.png-wh_50

f.查看掛載是否成功

wKioL1kIhJKAttdNAAAbWQ1IwjE929.png-wh_50

 

 

五、一些實際的小例子?

我在設置mysql的時候,將

my.cnf文件

innodb_buffer_pool_size = 6G(我操作系統的記憶體就是6G,一般這個值設置為操作系統記憶體的80%)

這個值並不是設置的越大越好。設置的過大,會導致system的swap空間被占用,導致操作系統變慢,從而減低sql查詢的效率。

這裡你可以這麼理解,當我將這個buffer_pool_size設置得過大,跟操作系統記憶體一樣大的時候,我使用mysql,會在一段時間內調用大量的數據進記憶體,由於linux的記憶體機制,再根據最近最優的原則,將一部分數據篩選放入swap分區,而swap分區沒有及時的清理掉數據,當再次調用其它數據的時候,又會將一部分數據篩選放入swap分區,可能會出現一個現象,就是物理記憶體還有剩餘,甚至是空的,而swap分區卻是滿的。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 寫在開頭 今天就放假了,照理說應該寫今年的總結了,但是回頭一看,很久沒有寫過技術類的文字了,還是先不吐槽了。 關於文件緩存 寫了很多的代碼,常常在寫EXE(定時任務)或者寫小站點(數據的使用和客戶端調用之間)都需要用到緩存,數據在記憶體和文本都保留一個整體。 當然也可以寫到資料庫,不過個人覺得不方便查 ...
  • 在現在的軟體編程中,不可避免的會用到多線程或者其他方式來實現非同步的目的,那麼,線程是個什麼東西,如何使用?這些都是需要去學習與摸索的東西。不過在學習線程之前,還是有一些知識需要掌握的,雖說都是書本上的東西,但是還是對線程的學習有一定的作用的。 進程 目的 現在的電腦存在很多的操作系統(OS),大部 ...
  • 系統啟動流程 systemd Unit 類型 服務管理 ` 運行級別 CentOS7 引導啟動順序 service unit 文件格式 設置內核參數 啟動排錯 破解CentOS7 的root 口令 修複GRUB2 ...
  • ramdisk ramdisk文件的製作: mkinitrd ...
  • Linux 組成 終端terminal 互動式介面 命令提示符 執行命令 執行外部命令 命令別名 命令格式 簡單命令 date 顯示日期和時間 d: 顯示字元串所指的日期與時間。字元串前後必須加上雙引號; s: 根據字元串來設置日期與時間。字元串前後必須加上雙引號; u: 顯示GMT; date d ...
  • Nginx的安裝 點擊進入 "Ngunx官網下載穩定版本頁面" 找到 Pre Built Packages for Stable version ,選擇與自己系統相關的操作,如 CentOS 7 ,則選擇 To set up the yum repository for RHEL/CentOS, c ...
  • 嵌入式開發中,大家免不了需要模擬調試代碼,線上調試是排除bug最有效直接的方式,今天我們要聊的是調試里最基礎的東西,即介面標準。ARM內核原生支持2種業界通用的介面標準,分別是JTAG和SWD。本節課豹哥先給大家詳細講講JTAG介面。 ...
  • S5PV210 時鐘體系 如下麵時鐘結構圖所示,S5PV210 中包含 3 大類時鐘域, 分別是主系統時鐘域(簡稱 MSYS)、顯示相關的時鐘域(簡稱 DSYS)、 外圍設備的時鐘域(簡稱 PSYS)。 ~~~~ 1) MSYS:用來給 cortex a8 處理器、DRAM 控制器、3D、IRAM、 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...