本頁面說明 Spanner 分級儲存空間的運作方式。GoogleSQL 和 PostgreSQL 方言資料庫都支援這項功能。
Spanner 分級儲存空間是一項全代管儲存功能,可讓您選擇將資料儲存在固態硬碟 (SSD) 或傳統硬碟 (HDD)。根據預設,如果您未使用分級儲存,資料會儲存在 SSD 儲存空間。視您使用或存取資料的頻率而定,建議您使用分級式儲存空間,並將資料儲存在 SSD 和 HDD 儲存空間。
- SSD 儲存空間是多數用途中效能最高 (每秒查詢次數較高) 且最具成本效益的選擇。建議您使用這項服務,儲存寫入和讀取處理量高的活躍資料,以及需要低延遲資料存取機制的資料。
- HDD 儲存空間有時適用於不常存取、對延遲不敏感的大型資料集,或儲存空間費用是重要考量因素的情況。
使用分層儲存空間,即可同時享有 SSD 儲存空間和 HDD 儲存空間的優點。SSD 儲存空間可支援高效能的使用中資料,HDD 儲存空間則可支援不常存取的資料,且費用較低。
選擇 SSD 或 HDD 儲存空間
下表列出 SSD 和 HDD 儲存空間的異同。表中的處理量數據是依節點計算,並會隨著 Spanner 執行個體中的節點數量線性擴充。如有疑慮,建議您選擇 SSD 儲存空間。
| SSD 儲存空間 | HDD 儲存空間 | |
|---|---|---|
| 目標用途 | 需要高讀寫處理量和低延遲資料存取的資料 | 不常存取或對延遲不敏感的大型資料集 |
| 每個節點預期的處理量 區域設定 |
每秒最多讀取 22,500 次 每秒最多寫入 3,500 次 |
每秒讀取查詢數 (QPS) 最高 1,500 次 每秒寫入查詢數 (QPS) 最高 3,500 次 |
| 每個節點的預期處理量 雙區域和多區域設定 |
每個區域每秒最多讀取 15,000 次 每秒最多寫入 2,700 次 |
每個區域每秒最多讀取 1,000 次 每秒最多寫入 2,700 次 |
| 支援的操作 | 讀取、寫入、更新及刪除 | 讀取、寫入、更新及刪除 |
使用最佳化處理量的寫入作業,可提高寫入處理量,超過表格中的數字。詳情請參閱「效能總覽」。
優點
分級式儲存空間可讓您同時使用 SSD 和 HDD 儲存空間,具有下列優點:
- 大幅降低總持有成本:HDD 儲存空間提供成本較低的選項,適合不常存取或對延遲不敏感的大型資料集。
- 管理更輕鬆:提供全代管分級服務,不需額外建立複雜的管道和分割邏輯。
- 統一且一致的體驗:提供統一的資料存取機制,並針對熱資料和 (可變動) 冷資料提供一組指標
- 提升效能:將資料整理到不同的位置群組,提供資料位置和資料欄隔離功能,進而提升查詢效能。同一位置群組中的資料會儲存在實體位置相近的地方。
分級儲存空間的運作方式
根據預設,建立新執行個體時,資料只會儲存在 SSD 儲存空間。同樣地,現有執行個體中的資料也只會儲存在 SSD 儲存空間。
如果選擇使用分層儲存空間,將部分資料儲存在 HDD 儲存空間,則必須建立位置群組,用於定義結構定義中資料的分層儲存空間政策。建立位置群組時,您可以定義儲存空間類型,例如 ssd 或 hdd。您也可以視需要定義資料在 SSD 儲存空間中儲存的時間長度,超過這個時間後,資料就會移至 HDD 儲存空間。這個時間是相對於資料的修訂版本時間戳記。指定時間過後,Spanner 會在正常壓縮週期內將資料遷移至 HDD 儲存空間,這通常會在指定時間後的七天內發生。如要以比一般壓縮週期更快的速度在 SSD 和 HDD 之間遷移資料,可以手動觸發主要壓縮。這稱為依年齡分級的儲存空間政策。使用以時間為依據的分層儲存政策時,資料必須在 SSD 儲存至少一小時,才能移至 HDD 儲存空間。
定義位置群組後,您可以在建立資料表時,設定資料庫、資料表、資料欄或次要索引層級的分層儲存政策。分級儲存政策會決定資料的儲存方式和位置。如需操作說明,請參閱「建立及管理位置群組」。
重要行為詳細資料
使用分級儲存空間時,系統會按照以下方式運作:
- 儲存空間級別會套用至儲存格層級:依據儲存格的修訂版本時間戳記,以時間為準的階層式儲存空間政策會套用至資料列中的個別儲存格。如果資料的修訂時間戳記早於指定時間長度,就會移至 HDD 儲存空間。因此,單一資料列可能會有部分資料位於 SSD,部分資料位於 HDD,具體取決於每個儲存格上次更新的時間。
- 交錯資料表各自獨立:位置群組設定和分層儲存政策不會沿用至交錯子資料表。您必須個別為每個資料表套用這些設定。
- 讀取作業不會影響資料老化:從資料表讀取資料不會重設資料年齡,也不會阻止資料移至 HDD。只有更新資料的寫入作業會重設修訂時間戳記,並將資料保留在 SSD 儲存空間中。
- 將資料從 HDD 移回 SSD:更新儲存在 HDD 的資料時,Spanner 會將新版資料直接寫入 SSD 儲存空間。HDD 上的舊版資料會標示為過時,並在稍後由背景壓縮程序清除。您可以手動觸發主要壓縮作業,加快清理速度。這可確保冷資料更新後,後續讀取新資料時,能立即享有 SSD 效能。
備份與還原
您可以使用 Spanner 備份功能備份及還原資料。備份包含所有儲存空間結構定義資訊,包括 INFORMATION_SCHEMA.LOCALITY_GROUP_OPTIONS,用於指定每個位置群組的儲存空間類型。如要將含有位置群組的備份還原至新執行個體,目的地執行個體必須採用 Spanner Enterprise 版或 Spanner Enterprise Plus 版。
Data Boost
您可以使用 Spanner Data Boost 存取 SSD 或 HDD 儲存空間中的資料。查詢 HDD 儲存空間中的資料時,會使用執行個體中的個別 HDD 磁碟負載容量,類似於使用個別運算資源的方式。
搜尋索引
觀測能力
分層儲存空間提供下列觀測功能。
Cloud Monitoring 指標
Spanner 提供下列指標,協助您透過 Cloud Monitoring 監控分層儲存空間用量和資料:
spanner.googleapis.com/instance/storage/used_bytes(總儲存空間):顯示儲存在 SSD 和 HDD 儲存空間的資料總位元組數。spanner.googleapis.com/instance/storage/combined/limit_bytes:顯示 SSD 和 HDD 儲存空間限制總和。spanner.googleapis.com/instance/storage/combined/limit_bytes_per_processing_unit:顯示每個處理單元的 SSD 和 HDD 儲存空間合併限制。spanner.googleapis.com/instance/storage/combined/utilization:顯示 SSD 和 HDD 儲存空間的合併使用率,並與合併儲存空間限制進行比較。spanner.googleapis.com/instance/disk_load:以百分比顯示 HDD 使用率。如果執行個體的 HDD 磁碟負載達到 100%,延遲時間會大幅增加。
如果現有查詢會依 storage_class:ssd 篩選現有指標,則必須移除篩選器,才能查看 HDD 用量。
如要進一步瞭解如何監控 Spanner 資源,請參閱「使用系統洞察功能監控執行個體」和「使用 Cloud Monitoring 監控執行個體」。
資訊結構定義
INFORMATION_SCHEMA.LOCALITY_GROUP_OPTIONS 包含 Spanner 資料庫中的位置群組和選項清單。其中包含 default 位置群組的資訊。IS_INHERITED 欄會指出位置群組的儲存空間類型是明確設定或沿用。詳情請參閱 GoogleSQL 方言資料庫的 locality_group_options 和 PostgreSQL 方言資料庫的 locality_group_options。
如要查看哪個位置群組儲存各個資料表、索引和資料欄,請查詢 TABLE_OPTIONS、INDEX_OPTIONS 和 COLUMN_OPTIONS 資料表。如果資料表和索引在 TABLE_OPTIONS 或 INDEX_OPTIONS 中沒有 locality_group 資料列,則會使用 default 位置群組。在 COLUMN_OPTIONS 中,IS_INHERITED 欄會指出位置群組是明確設定在資料欄上,還是從資料表沿用。詳情請參閱:
- GoogleSQL 方言資料庫:
TABLE_OPTIONS、INDEX_OPTIONS和COLUMN_OPTIONS。 - PostgreSQL 方言資料庫:
table_options、index_options和column_options。
內建統計資料表
使用分層儲存空間的資料庫,可使用下列內建統計資料表:
SPANNER_SYS.TABLE_SIZES_STATS_1HOUR:顯示資料庫中各資料表的 HDD 和 SSD 儲存空間用量。SPANNER_SYS.TABLE_SIZES_STATS_PER_LOCALITY_GROUP_1HOUR:顯示資料庫中各位置群組的 HDD 和 SSD 儲存空間用量。
詳情請參閱「資料表大小統計資料」。
查詢統計資料和讀取統計資料表包含下列與分級儲存空間相關的資料欄:
AVG_DISK_IO_COST:這項查詢在 Spanner HDD 磁碟負載方面的平均費用。您可以使用這個值,比較資料庫中執行的讀取作業之間的相對 HDD I/O 費用。值越高,代表您使用的 HDD 磁碟負載越多,查詢速度可能比在 SSD 上執行時慢。此外,如果 HDD 磁碟負載已滿,查詢效能可能會進一步受到影響。
定價
使用分級儲存空間不會產生額外費用。系統會根據執行個體使用的運算資源量,以及資料庫使用的儲存空間量,按照標準 Spanner 定價向您收費。儲存在 SSD 和 HDD 的資料會按照各自的儲存空間費率計費。在 SSD 和 HDD 儲存空間之間移動資料不會產生費用。查詢 HDD 上的資料時,會使用執行個體的 HDD 磁碟負載能力,這屬於運算能力定價的一部分。詳情請參閱「Spanner 定價」。
後續步驟
- 進一步瞭解位置群組。
- 瞭解如何建立及管理位置群組。
- 進一步瞭解如何使用時間戳記述詞下推功能最佳化查詢。