Questa pagina descrive e spiega come funziona l'archiviazione a livelli in Spanner. Questa funzionalità è supportata sia nei database con dialetto GoogleSQL sia in quelli con dialetto PostgreSQL.
L'archiviazione a livelli di Spanner è una funzionalità di archiviazione completamente gestita che ti consente di scegliere se archiviare i dati su unità a stato solido (SSD) o su hard disk (HDD). Per impostazione predefinita, quando non utilizzi l'archiviazione a livelli, i dati vengono archiviati su spazio di archiviazione SSD. A seconda della frequenza con cui utilizzi o accedi ai dati, potresti prendere in considerazione l'utilizzo dell'archiviazione a livelli e l'archiviazione dei dati sia su SSD che su HDD.
- L'archiviazione SSD è la scelta più efficiente (numero maggiore di query al secondo) ed economica per la maggior parte dei casi d'uso. Dovresti utilizzarlo per archiviare dati attivi con un throughput di scrittura e lettura elevato e dati che richiedono un accesso a bassa latenza.
- L'archiviazione su HDD a volte è appropriata per set di dati di grandi dimensioni che non sono sensibili alla latenza, a cui si accede raramente o se il costo dello spazio di archiviazione è un fattore importante.
L'utilizzo dell'archiviazione a livelli ti consente di sfruttare sia lo spazio di archiviazione SSD, che supporta le prestazioni elevate dei dati attivi, sia lo spazio di archiviazione HDD, che supporta l'accesso ai dati non frequente a un costo inferiore.
Scegli tra archiviazione SSD e HDD
La seguente tabella elenca le differenze e le somiglianze tra lo spazio di archiviazione SSD e HDD. I dati relativi alla velocità effettiva nella tabella sono per nodo e scalano in modo lineare con il numero di nodi nell'istanza Spanner. In caso di dubbi, ti consigliamo di scegliere l'archiviazione SSD.
| Archiviazione SSD | Archiviazione HDD | |
|---|---|---|
| Casi d'uso target | Dati che richiedono un throughput di scrittura e lettura elevato e un accesso ai dati a bassa latenza | Set di dati di grandi dimensioni che non sono sensibili alla latenza o a cui si accede raramente |
| Throughput previsto per nodo Configurazioni a livello di regione |
Fino a 22.500 QPS in lettura Fino a 3500 QPS in scrittura |
Fino a 1500 QPS in lettura Fino a 3500 QPS in scrittura |
| Throughput previsto per nodo Configurazioni a due regioni e multiregionali |
Fino a 15.000 QPS di lettura per regione Fino a 2700 QPS di scrittura |
Fino a 1000 QPS di lettura per regione Fino a 2700 QPS di scrittura |
| Operazioni supportate | Lettura, scrittura, aggiornamento ed eliminazione | Lettura, scrittura, aggiornamento ed eliminazione |
Utilizza le scritture ottimizzate per il throughput per aumentare il throughput di scrittura oltre i numeri riportati nella tabella. Per saperne di più, consulta Panoramica delle prestazioni.
Vantaggi
L'archiviazione a livelli offre i seguenti vantaggi consentendoti di utilizzare sia lo spazio di archiviazione SSD che quello HDD:
- Riduzione significativa del costo totale di proprietà: lo spazio di archiviazione su HDD offre un'opzione a basso costo per set di dati di grandi dimensioni che non sono sensibili alla latenza o a cui si accede raramente.
- Facilità di gestione: fornisce un servizio di tiering completamente gestito senza la complessità di pipeline aggiuntive e logica di suddivisione.
- Esperienza unificata e coerente: fornisce un accesso unificato ai dati e un unico insieme di metriche per i dati ad accesso frequente e ad accesso non frequente (mutabili)
- Prestazioni migliorate: migliora le prestazioni delle query organizzando i dati in gruppi di località diversi, il che fornisce località dei dati e isolamento tra le colonne. I dati nello stesso gruppo di località vengono archiviati fisicamente vicini.
Come funziona l'archiviazione a livelli
Per impostazione predefinita, quando crei una nuova istanza, i dati vengono archiviati solo nello spazio di archiviazione SSD. Analogamente, anche i dati nelle istanze esistenti vengono archiviati solo su spazio di archiviazione SSD.
Se scegli di utilizzare l'archiviazione a livelli per archiviare alcuni dati nello spazio di archiviazione HDD, devi creare un gruppo di località, che viene utilizzato per definire la policy di archiviazione a livelli per i dati nello schema. Quando crei un gruppo di località, puoi definire il tipo di archiviazione, ssd o hdd. Se vuoi, puoi anche definire il periodo di tempo per cui i dati vengono archiviati nello spazio di archiviazione SSD prima di essere spostati nello spazio di archiviazione HDD. Questo tempo è relativo al timestamp di commit dei dati. Trascorso il tempo specificato, Spanner esegue la migrazione dei dati allo spazio di archiviazione HDD durante il normale ciclo di compattazione, che in genere avviene nel corso di sette giorni dal momento specificato. Per eseguire la migrazione dei dati tra SSD e HDD più velocemente rispetto al normale ciclo di compattazione, puoi attivare manualmente una compattazione principale.
Questo approccio è noto come criterio di archiviazione a livelli basato sull'età. Quando utilizzi una policy di archiviazione a livelli basata sull'età, il periodo di tempo minimo per cui i dati devono essere archiviati su SSD prima di essere spostati nell'archiviazione HDD è di un'ora.
Una volta definiti i gruppi di località, quando crei le tabelle, puoi impostare la policy di archiviazione a livelli a livello di database, tabella, colonna o indice secondario. La policy di archiviazione a livelli determina come e dove vengono archiviati i dati. Per istruzioni, consulta Crea e gestisci i gruppi di località.
Dettagli sul comportamento chiave
Quando utilizzi l'archiviazione a livelli, si applicano i seguenti comportamenti:
- I livelli di archiviazione vengono applicati a livello di cella: le policy di archiviazione a livelli basate sull'età si applicano alle singole celle di una riga, in base al timestamp di commit della cella. I dati vengono spostati nello spazio di archiviazione HDD se il timestamp di commit è precedente alla durata specificata. Una singola riga può quindi avere alcuni dati su SSD e altri su HDD, a seconda di quando è stato eseguito l'ultimo aggiornamento di ogni cella.
- Le tabelle con interleaving sono indipendenti: le impostazioni dei gruppi di località e le policy di archiviazione a livelli non vengono ereditate dalle tabelle secondarie con interleaving. Devi applicare queste impostazioni a ogni tabella singolarmente.
- Le operazioni di lettura non influiscono sull'invecchiamento dei dati: la lettura dei dati da una tabella non ne reimposta l'età né ne impedisce lo spostamento su HDD. Solo un'operazione di scrittura che aggiorna i dati reimposta il timestamp di commit e li mantiene nello spazio di archiviazione SSD.
- Spostamento dei dati da HDD a SSD: quando aggiorni i dati archiviati su HDD, Spanner scrive la nuova versione dei dati direttamente nello spazio di archiviazione SSD. La versione precedente dei dati sull'HDD viene contrassegnata come obsoleta e viene ripulita in un secondo momento da un processo di compattazione in background. Puoi attivare manualmente una compattazione principale per eseguire la pulizia più velocemente. In questo modo, gli aggiornamenti ai dati cold beneficiano immediatamente delle prestazioni degli SSD per le letture successive dei nuovi dati.
Backup e ripristino
Puoi eseguire il backup e il ripristino dei dati utilizzando i backup di Spanner.
Il backup contiene tutte le informazioni sullo schema di archiviazione, tra cui
INFORMATION_SCHEMA.LOCALITY_GROUP_OPTIONS, che
specifica il tipo di archiviazione di ogni gruppo di località. Per ripristinare un backup che contiene gruppi di località in una nuova istanza, l'istanza di destinazione deve essere nella versione Spanner Enterprise o Spanner Enterprise Plus.
Data Boost
Puoi utilizzare Spanner Data Boost per accedere ai dati nello spazio di archiviazione SSD o HDD. L'esecuzione di query sui dati nello spazio di archiviazione su HDD utilizza una capacità di carico del disco HDD separata dalla tua istanza, in modo simile a come utilizza un computing separato.
Indici di ricerca
La ricerca a testo intero e gli indici vettoriali ereditano il gruppo di località impostato sull'oggetto di database.
Osservabilità
Per l'archiviazione a livelli sono disponibili le seguenti funzionalità di osservabilità.
Metriche di Cloud Monitoring
Spanner fornisce le seguenti metriche per aiutarti a monitorare l'utilizzo dello spazio di archiviazione a livelli e i dati utilizzando Cloud Monitoring:
spanner.googleapis.com/instance/storage/used_bytes(Spazio di archiviazione totale): mostra i byte totali di dati archiviati su spazio di archiviazione SSD e HDD.spanner.googleapis.com/instance/storage/combined/limit_bytes: mostra il limite di spazio di archiviazione SSD e HDD combinato.spanner.googleapis.com/instance/storage/combined/limit_bytes_per_processing_unit: mostra il limite di archiviazione SSD e HDD combinato per ogni unità di elaborazione.spanner.googleapis.com/instance/storage/combined/utilization: mostra l'utilizzo combinato dello spazio di archiviazione SSD e HDD rispetto al limite di spazio di archiviazione combinato.spanner.googleapis.com/instance/disk_load: mostra l'utilizzo dell'HDD in percentuale. Se l'istanza raggiunge il 100% del carico del disco HDD, si verifica un aumento significativo della latenza.
Se hai query esistenti che filtrano le metriche esistenti in base a storage_class:ssd, devi rimuovere il filtro per visualizzare l'utilizzo dell'HDD.
Per scoprire di più sul monitoraggio delle risorse Spanner, consulta Monitora le istanze con gli insight di sistema e Monitora le istanze con Cloud Monitoring.
Schema di informazioni
INFORMATION_SCHEMA.LOCALITY_GROUP_OPTIONS contiene l'elenco dei gruppi di località e delle opzioni nel tuo database Spanner. Include informazioni
per il gruppo di località default. La colonna IS_INHERITED indica se il tipo di archiviazione di un gruppo di località è impostato in modo esplicito o ereditato. Per saperne di più, consulta locality_group_options per i database con dialetto GoogleSQL e locality_group_options per i database con dialetto PostgreSQL.
Per vedere quale gruppo di località archivia ogni tabella, indice e colonna, esegui una query sulle tabelle TABLE_OPTIONS, INDEX_OPTIONS e COLUMN_OPTIONS. Le tabelle e gli indici che non hanno una riga locality_group in TABLE_OPTIONS o INDEX_OPTIONS utilizzano il gruppo di località default. In COLUMN_OPTIONS, la colonna IS_INHERITED indica se il gruppo di località è impostato esplicitamente sulla colonna o ereditato dalla tabella. Per ulteriori informazioni, consulta le seguenti risorse:
- Database con dialetto GoogleSQL:
TABLE_OPTIONS,INDEX_OPTIONSeCOLUMN_OPTIONS. - Database con dialetto PostgreSQL:
table_options,index_optionsecolumn_options.
Tabelle delle statistiche integrate
Per i database che utilizzano lo spazio di archiviazione a livelli sono disponibili le seguenti tabelle di statistiche integrate:
SPANNER_SYS.TABLE_SIZES_STATS_1HOUR: mostra l'utilizzo dello spazio di archiviazione HDD e SSD per ogni tabella del database.SPANNER_SYS.TABLE_SIZES_STATS_PER_LOCALITY_GROUP_1HOUR: mostra l'utilizzo dello spazio di archiviazione HDD e SSD per ogni gruppo di località nel database.
Per ulteriori informazioni, consulta Statistiche sulle dimensioni delle tabelle.
Le tabelle delle statistiche delle query e delle statistiche di lettura hanno la seguente colonna relativa allo spazio di archiviazione a livelli:
AVG_DISK_IO_COST: il costo medio di questa query in termini di carico del disco HDD di Spanner. Utilizza questo valore per effettuare confronti relativi dei costi di I/O dell'HDD tra le letture che esegui nel database. Un valore più alto indica che stai utilizzando un carico maggiore del disco HDD e che la query potrebbe essere più lenta rispetto a quella eseguita su SSD. Inoltre, se il carico del disco HDD è al massimo, le prestazioni delle query potrebbero essere ulteriormente influenzate.
Per saperne di più, consulta Statistiche sulle query e Statistiche di lettura.
Prezzi
Non sono previsti costi aggiuntivi per l'utilizzo dell'archiviazione a livelli. Ti verranno addebitati i prezzi standard di Spanner per la quantità di capacità di calcolo utilizzata dall'istanza e per la quantità di spazio di archiviazione utilizzato dal database. I dati archiviati su SSD e HDD vengono fatturati in base alle rispettive tariffe di archiviazione. Non ti verrà addebitato alcun costo per lo spostamento dei dati tra lo spazio di archiviazione SSD e HDD. L'esecuzione di query sui dati su HDD utilizza la capacità di carico del disco HDD dell'istanza, che fa parte del prezzo della capacità di calcolo. Per saperne di più, consulta i prezzi di Spanner.
Passaggi successivi
- Scopri di più sui gruppi di località.
- Scopri come creare e gestire i gruppi di località.
- Scopri di più sull'ottimizzazione delle query con il pushdown del predicato del timestamp.