您好,登錄后才能下訂單哦!
今天就跟大家聊聊有關sql server中的內存基礎知識有哪些,可能很多人都不太了解,為了讓大家更加了解,小編給大家總結了以下內容,希望大家根據這篇文章可以有所收獲。
一. 前言
對于sql server 這個產品來說,內存這塊是最重要的一個資源, 當我們新建一個會話,相同的sql語句查詢第二次查詢時間往往會比第一次快,特別是在sql統計或大量查詢數據輸出時,會有這么感覺。除了第一次要編譯生成執行計劃, 在CPU,I/O 的影響外,最主要的是第二次查詢是從內存緩存中讀出,為什么是這樣,sql server 內存里存儲了什么,它與windows內存又有什么區別? 參考了一些資料 下面來試著講講。
二. 內存和硬盤
為什么內存是寶貴的,在每個系統上都是有限的,就像你看到的1 tb的硬盤,但是你通常看到的是50-200 G的內存, 物理內存的訪問速度非常快,不能超過一定的限制。在內存有限的情況下,如果所有的進程都使用了有限的內存,并且新的進程將無法為他們找到任何內存,這就出現了虛擬地址空間的概念(也稱為VAS)。
Virtual Address Space(虛擬地址空間)
是指一個應用程序能夠申請訪問的最大地址空間。32位尋址空間最大是4G, 64位尋址空間最大是8TB。
VAS作為中間的抽象層的, 不是所有的請求都直接映射到物理內存,它首先映射到VAS然后映射到物理內存。因此,它可以更協調的方式管理對內存的請求,而不是讓進程去做,如果不是這樣,它很快就會導致內存崩潰。
在Windows操作系統中,VAS 的內核進程與用戶進程之間的劃分是相同的。對于32位系統,最大的VAS 是4 G的內核/ 2 G到應用程序的中,在這里,SQL Server是應用程序進程,當我使用word進程時,它意味SQL Server進程差不多一樣,將得到2 G的VAS。因此,從理論上講,這意味著任何應用程序進程在32位上運行的都將擁有最大限度的2 G。
三 sql server 內存 架構
sql server 內存管理,在sql server 2012發生了重大改變,對內存重新實現了一遍。 先看下版本之間內存管理圖的區別
名詞術語
3.1 BufferPool
SQL Server使用BufferPool緩沖池來有效地管理SQL Server進程的內存請求。它是SQL Server的最大內存消耗者。緩沖區是內存中的一個8 KB的頁面,與數據或索引頁面大小相同,您可以將緩沖區看作是一個框架,它在從磁盤到內存的時候保存數據和索引頁。
SQL Server緩沖區管理器管理將數據頁讀入緩沖池的任務,并將其寫入磁盤。它是SQL Server的預留內存存儲,如果您不為它設置值,它將占用盡可能多的內存。因此,在spconfigure中為max server內存設置最佳值總是被推薦為一種良好的實踐。緩沖池只將內存分配給需要少于8 KB頁面的請求。
對于大于8 KB內存的所有請求,都是由windows API直接分配的。所有緩存存儲計劃、數據和索引頁都存儲在這個緩沖池中。當用戶請求row/rows時,如果緩沖區池中沒有,則使該頁面從磁盤進入內存。這種輸入/輸出可能在繁忙的系統上特別昂貴,因此盡可能減少SQL服務器緩存的大小,這可能會被用戶看作是內存泄漏或SQL Server占用大量內存,但實際上它提高了性能,實際上這個特性是通過設計實現的。
下面這些內存不是來自緩沖池: SQL LCR 擴展存儲過程 鏈接服務器分配的內存 內存管理器完成的大頁面分配(大頁面為任意頁面>8 KB) COM對象
3.2 single-page
這塊內存是<=8kb 的存儲,適用于sql server 2008及以前, 屬于buffer pool 緩沖池來分配。有存儲數據頁面,Consumer功能組件。
3.3 multi- page
這塊內存是>8kb的 存儲,適用于sql server 2008及以前, 不屬于buffer pool 緩沖池來分配, 有存儲Consumer功能組件, 第三方代碼, Threads線程。
3.4 any size page
這個適用于sql server 2012及以上,整合了single-page,multi-page 統稱pages。
四. sql server 2008 內存
從內存圖我們可以看到有 page reservation 需預先申請的內存, 有momory objects 從windows api申請的內存, 有clr第三方申請的內存。
內存的分類方式有很多,下面介紹三種方式:
1. 按用途分類
1.1 Database Cache(數據頁面緩沖區)
當用戶修改了某個頁面上的數據時,sql server會在頁存中將這個頁修改。但不會立刻將這個頁面寫回硬盤,而是等后面的checkpoint 或lazy write集中處理。
1.2 各類Consumer功能組件
Connection 連接:包括輸入緩沖池和輸出緩沖池, 用來存儲用戶指令和返回結果。
General :一組大雜燴: 語句,語句編譯,范式化,鎖數據結構,事務上下文,表格,索引的元數據等。
Query paln:語句和存儲過程的執行計劃。
Optimizer:sql server在生成執行計劃的過程中需要消耗的內存。
Utilities:像BCP, Log Manager,Parallel Queries,Backup
1.3 線程內存
為每個線程分配0.5MB的內存
1.4 第三方代碼申請的內存
如用戶定義的CLR,Linked Server分布式查詢從遠程數據庫取回大量數據。
2. 按申請方式分類
申請方式是指要先預先Reserve一塊大的內存,然后再一小塊一小塊的commit。對Database Cache是會先Reserve,再commit。
其他所有內存使用,基本都是直接commit,都叫Stolen。
3. 按申請大小分類(上面的內存圖就是這種分類)
有二種內存申請單位: 一種是小于或等于8KB的,稱為Buffer Pool,一次一個頁面的這種分配,被稱為single page allocation.
一種是大于8kb的,稱為Multi-page(以前叫MemToLeave),這種分配,被稱為 Multiple Page Allocation.
注意這里的很大一部分內存不受 sql server本身控制.因為第三方代碼申請的內存都放在Multi-page里.
內存分類方法之間的關系
類型
Database cache
數據頁面緩沖區
Consumer
功能組件
3 Party code
第三方代碼
Threads
線程
Reserved/Commit
是
一般不是
一般不是
不是
Stolen
不是
是
是
是
Buffer Pool
(single- page)
所有
絕大部分
沒有
沒有
MemToLeave
(Multi -page)
沒有
一小部分
所有
所有
五.sql server 2012 內存
在 sql server 2012里,single page allocator 和multi page allocator 統一起來了,叫做any size page allocator。max server memory 不再像以前的版本那樣,只控制buffer pool的大小,也包括那些大于8kb 的內存請求。也就是max server memory 能夠更準確地控制SQL Server 的內存使用了。
如下圖所示:
使用dmv 來查看當前實例的總內存空間,以及占用內存空間
--Target Server Memory (KB)最多能申請的內存量 --Total Server Memory (KB) 目前使用了多少內存量
從下面的空間占用也可以看出來, 給sql server有分配多少內存, 它就會占用多少內存,以達到性能的最優。
select counter_name, ltrim(cntr_value*1.0/1024.0/1024.0)+'G' as memoryGB from master.sys.dm_os_performance_counters where counter_name like '%target%server%memory%'or counter_name like '%total%memory%'
當您啟動Microsoft SQL Server時,SQL Server內存使用量可能會繼續穩步增長,而不是減少,即使服務器上的活動很低。此外,任務管理器和性能監視器可能顯示,計算機上可用的物理內存會逐漸減少,直到可用內存在4 MB到10 MB之間。這種行為本身并不表示內存泄漏。這種行為是典型的,并且是SQL Server緩沖池的預期行為。
默認情況下,SQL Server根據操作系統報告的物理內存負載動態地增長和縮小緩沖池(緩存)的大小。只要有足夠的內存(4 MB和10 MB)可以防止分頁,那么SQL Server緩沖池就會繼續增長。當與SQL Server在同一臺計算機上分配內存時,SQL Server緩沖管理器將根據需要釋放內存。SQL Server可以每秒釋放數兆字節的內存。這允許SQL Server快速地適應內存分配更改。
您可以為SQL Server數據庫引擎使用最小服務器內存和最大服務器內存配置選項使用多少內存(緩沖池)設置上限和下限
請注意,通過上圖設置內存最大 max 只限制SQL Server緩沖池的大小。不限制SQL Server為其他組件分配的剩余未保留內存區域,如擴展存儲過程、COM對象、非共享dll、EXEs和MAPI組件。由于之前的分配,SQL Server私有字節的數量超過了最大服務器內存配置。
看完上述內容,你們對sql server中的內存基礎知識有哪些有進一步的了解嗎?如果還想了解更多知識或者相關內容,請關注億速云行業資訊頻道,感謝大家的支持。
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。