Crea snapshot delle tabelle

Questo documento descrive come creare uno snapshot di una tabella utilizzando la consoleGoogle Cloud , l'istruzione SQL CREATE SNAPSHOT TABLE, il comando bq cp --snapshot o l'API jobs.insert. Questo documento è rivolto agli utenti che hanno familiarità con gli snapshot delle tabelle BigQuery.

Autorizzazioni e ruoli

Questa sezione descrive le autorizzazioni di Identity and Access Management (IAM) necessarie per creare uno snapshot della tabella e i ruoli IAM predefiniti che concedono queste autorizzazioni.

Autorizzazioni

Per creare uno snapshot della tabella, devi disporre delle seguenti autorizzazioni:

Autorizzazione Risorsa Note
Tutti i seguenti:

bigquery.tables.get
bigquery.tables.getData
bigquery.tables.createSnapshot
bigquery.datasets.get
bigquery.jobs.create 		La tabella di cui vuoi creare lo snapshot. Poiché la scadenza dello snapshot comporta l'eliminazione dello snapshot in un secondo momento, per creare uno snapshot con una data/ora di scadenza devi disporre dell'autorizzazione bigquery.tables.deleteSnapshot.
bigquery.tables.create
bigquery.tables.updateData 		Il set di dati che contiene lo snapshot della tabella.

Ruoli

I ruoli BigQuery predefiniti che forniscono le autorizzazioni richieste sono i seguenti:

Role Risorsa Note
Almeno uno dei seguenti:

bigquery.dataViewer
bigquery.dataEditor
bigquery.dataOwner

Inoltre, deve rispettare almeno uno dei seguenti criteri:

bigquery.jobUser
bigquery.studioUser
bigquery.user
bigquery.studioAdmin
bigquery.admin 		La tabella di cui vuoi creare lo snapshot. Solo bigquery.dataOwner, bigquery.admin e bigquery.studioAdmin possono essere utilizzati per creare uno snapshot con una data di scadenza.
Almeno uno dei seguenti:

bigquery.dataEditor
bigquery.dataOwner
bigquery.studioAdmin
bigquery.admin 		Il set di dati che contiene il nuovo snapshot della tabella.

Limitazioni

Per informazioni sulle limitazioni degli snapshot delle tabelle, consulta Limitazioni degli snapshot delle tabelle.

Inoltre, la creazione di snapshot delle tabelle è soggetta alle seguenti limitazioni, che si applicano a tutti i job di copia delle tabelle:

  • Quando crei uno snapshot della tabella, il suo nome deve rispettare le stesse regole di denominazione della creazione di una tabella.
  • La creazione di snapshot delle tabelle è soggetta ai limiti di BigQuery sui job di copia.
  • Il set di dati dello snapshot della tabella deve trovarsi nella stessa regione e nella stessa organizzazione del set di dati che contiene la tabella di cui stai acquisendo uno snapshot. Ad esempio, non puoi creare uno snapshot della tabella in un set di dati con sede negli Stati Uniti di una tabella che si trova in un set di dati con sede nell'UE. Dovrai invece creare una copia della tabella.
  • Il tempo impiegato da BigQuery per creare snapshot delle tabelle potrebbe variare in modo significativo tra le diverse esecuzioni, perché lo spazio di archiviazione sottostante viene gestito in modo dinamico.
  • Quando crei uno snapshot della tabella utilizzando l'interfaccia a riga di comando di BigQuery, lo snapshot ha la chiave di crittografia predefinita del set di dati di destinazione. Quando crei uno snapshot della tabella utilizzando SQL, lo snapshot ha la stessa chiave di crittografia della tabella di origine.

Crea uno snapshot della tabella

La best practice consiste nel creare uno snapshot della tabella in un set di dati diverso dalla tabella di base. Questa pratica consente di ripristinare la tabella di base dal relativo snapshot della tabella anche se il set di dati della tabella di base viene eliminato accidentalmente.

Quando crei uno snapshot della tabella, specifichi la tabella di cui vuoi creare lo snapshot e un nome univoco per lo snapshot della tabella. Facoltativamente, puoi specificare l'ora dello snapshot e la scadenza dello snapshot della tabella.

Crea uno snapshot della tabella con una scadenza

Puoi creare uno snapshot di una tabella che scade dopo 24 ore utilizzando una delle seguenti opzioni:

Console

  1. Nella console Google Cloud , vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nel riquadro a sinistra, fai clic su Spazio di esplorazione:

    Pulsante evidenziato per il riquadro Spazio di esplorazione.

    Se non vedi il riquadro a sinistra, fai clic su Espandi riquadro sinistro per aprirlo.

  3. Nel riquadro Explorer, espandi il progetto, fai clic su Set di dati, quindi sul set di dati.

  4. Fai clic su Panoramica > Tabelle, quindi fai clic sul nome della tabella di cui vuoi creare uno snapshot.

  5. Nel riquadro dei dettagli, fai clic su Altro > Crea snapshot.

  6. Nel riquadro Crea snapshot della tabella visualizzato, inserisci le informazioni relative a Progetto, Set di dati e Tabella per il nuovo snapshot della tabella.

  7. Nel campo Data e ora di scadenza, inserisci la data e l'ora di 24 ore da adesso.

  8. Fai clic su Salva.

SQL

Utilizza l'istruzione DDL CREATE SNAPSHOT TABLE:

  1. Nella console Google Cloud , vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nell'editor di query, inserisci la seguente istruzione:

    CREATE SNAPSHOT TABLE SNAPSHOT_PROJECT_ID.SNAPSHOT_DATASET_NAME.SNAPSHOT_NAME
CLONE TABLE_PROJECT_ID.TABLE_DATASET_NAME.TABLE_NAME
  OPTIONS (
    expiration_timestamp = TIMESTAMP 'TIMESTAMP_VALUE');

    Sostituisci quanto segue:

    • SNAPSHOT_PROJECT_ID: l'ID progetto del progetto in cui creare lo snapshot.
    • SNAPSHOT_DATASET_NAME: il nome del set di dati in cui creare lo snapshot.
    • SNAPSHOT_NAME: il nome dello snapshot che stai creando.
    • TABLE_PROJECT_ID: l'ID progetto del progetto che contiene la tabella da cui stai creando lo snapshot.
    • TABLE_DATASET_NAME: il nome del set di dati che contiene la tabella da cui stai creando lo snapshot.
    • TABLE_NAME: il nome della tabella da cui stai creando lo snapshot.
    • TIMESTAMP_VALUE: un valore di timestamp che rappresenta la data e l'ora tra 24 ore.

  3. Fai clic su Esegui.

Per saperne di più su come eseguire le query, consulta Esegui una query interattiva.

bq

Inserisci questo comando in Cloud Shell:

Vai a Cloud Shell 

bq cp \
--snapshot \
--no_clobber \
--expiration=86400 \
TABLE_PROJECT_ID:TABLE_DATASET_NAME.TABLE_NAME \
SNAPSHOT_PROJECT_ID:SNAPSHOT_DATASET_NAME.SNAPSHOT_NAME

Sostituisci quanto segue:

  • TABLE_PROJECT_ID: l'ID progetto del progetto che contiene la tabella da cui stai creando lo snapshot.
  • TABLE_DATASET_NAME: il nome del set di dati che contiene la tabella da cui stai creando lo snapshot.
  • TABLE_NAME: il nome della tabella da cui stai creando lo snapshot.
  • SNAPSHOT_PROJECT_ID: l'ID progetto del progetto in cui creare lo snapshot.
  • SNAPSHOT_DATASET_NAME: il nome del set di dati in cui creare lo snapshot.
  • SNAPSHOT_NAME: il nome dello snapshot che stai creando.

Il flag --no_clobber è obbligatorio.

API

Chiama il metodo jobs.insert con i seguenti parametri:

Parametro Valore
projectId L'ID progetto del progetto a cui addebitare questa operazione.
Corpo della richiesta 
{
  "configuration": {
    "copy": {
      "sourceTables": [
        {
          "projectId": "TABLE_PROJECT_ID",
          "datasetId": "TABLE_DATASET_NAME",
          "tableId": "TABLE_NAME"
        }
      ],
      "destinationTable": {
        "projectId": "SNAPSHOT_PROJECT_ID",
        "datasetId": "SNAPSHOT_DATASET_NAME",
        "tableId": "SNAPSHOT_NAME"
      },
      "operationType": "SNAPSHOT",
      "writeDisposition": "WRITE_EMPTY",
      "destinationExpirationTime":"TIMESTAMP_VALUE"
    }
  }
}

Sostituisci quanto segue:

  • TABLE_PROJECT_ID: l'ID progetto del progetto che contiene la tabella da cui stai creando lo snapshot.
  • TABLE_DATASET_NAME: il nome del set di dati che contiene la tabella da cui stai creando lo snapshot.
  • TABLE_NAME: il nome della tabella da cui stai creando lo snapshot.
  • SNAPSHOT_PROJECT_ID: l'ID progetto del progetto in cui creare lo snapshot.
  • SNAPSHOT_DATASET_NAME: il nome del set di dati in cui creare lo snapshot.
  • SNAPSHOT_NAME: il nome dello snapshot che stai creando.
  • TIMESTAMP_VALUE: un valore di timestamp che rappresenta la data e l'ora tra 24 ore.

Come per le tabelle, se non viene specificata una scadenza, lo snapshot della tabella scade dopo la scadenza predefinita della tabella o del set di dati che contiene lo snapshot della tabella.

Crea uno snapshot della tabella utilizzando il viaggio nel tempo

Puoi creare uno snapshot di una tabella così com'era un'ora fa utilizzando una delle seguenti opzioni:

Console

  1. Nella console Google Cloud , vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nel riquadro a sinistra, fai clic su Spazio di esplorazione:

    Pulsante evidenziato per il riquadro Spazio di esplorazione.

  3. Nel riquadro Explorer, espandi il progetto, fai clic su Set di dati, quindi sul set di dati.

  4. Fai clic su Panoramica > Tabelle, quindi fai clic sul nome della tabella di cui vuoi creare uno snapshot.

  5. Nel riquadro dei dettagli, fai clic su Altro > Crea snapshot.

  6. Nel riquadro Crea snapshot della tabella visualizzato, inserisci le informazioni relative a Progetto, Set di dati e Tabella per il nuovo snapshot della tabella.

  7. Nel campo Data/ora snapshot, inserisci la data e l'ora di un'ora fa.

  8. Fai clic su Salva.

SQL

Utilizza l'istruzione DDL CREATE SNAPSHOT TABLE con una clausola FOR SYSTEM_TIME AS OF:

  1. Nella console Google Cloud , vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nell'editor di query, inserisci la seguente istruzione:

    CREATE SNAPSHOT TABLE SNAPSHOT_PROJECT_ID.SNAPSHOT_DATASET_NAME.SNAPSHOT_NAME
CLONE TABLE_PROJECT_ID.TABLE_DATASET_NAME.TABLE_NAME
FOR SYSTEM_TIME AS OF
  TIMESTAMP_SUB(CURRENT_TIMESTAMP(), INTERVAL 1 HOUR);

    Sostituisci quanto segue:

    • SNAPSHOT_PROJECT_ID: l'ID progetto del progetto in cui creare lo snapshot.
    • SNAPSHOT_DATASET_NAME: il nome del set di dati in cui creare lo snapshot.
    • SNAPSHOT_NAME: il nome dello snapshot che stai creando.
    • TABLE_PROJECT_ID: l'ID progetto del progetto che contiene la tabella da cui stai creando lo snapshot.
    • TABLE_DATASET_NAME: il nome del set di dati che contiene la tabella da cui stai creando lo snapshot.
    • TABLE_NAME: il nome della tabella da cui stai creando lo snapshot.

  3. Fai clic su Esegui.

Per saperne di più su come eseguire le query, consulta Esegui una query interattiva.

bq

Inserisci questo comando in Cloud Shell:

Vai a Cloud Shell 

bq cp \
--no_clobber \
--snapshot \
TABLE_PROJECT_ID:TABLE_DATASET_NAME.TABLE_NAME@-3600000 \
SNAPSHOT_PROJECT_ID:SNAPSHOT_DATASET_NAME.SNAPSHOT_NAME

Sostituisci quanto segue:

  • TABLE_PROJECT_ID: l'ID progetto del progetto che contiene la tabella da cui stai creando lo snapshot.
  • TABLE_DATASET_NAME: il nome del set di dati che contiene la tabella da cui stai creando lo snapshot.
  • TABLE_NAME: il nome della tabella da cui stai creando lo snapshot.
  • SNAPSHOT_PROJECT_ID: l'ID progetto del progetto in cui creare lo snapshot.
  • SNAPSHOT_DATASET_NAME: il nome del set di dati in cui creare lo snapshot.
  • SNAPSHOT_NAME: il nome dello snapshot che stai creando.

Il flag --no_clobber è obbligatorio.

API

Chiama il metodo jobs.insert con i seguenti parametri:

Parametro Valore
projectId L'ID progetto del progetto a cui addebitare questa operazione.
Corpo della richiesta 
{
  "configuration": {
    "copy": {
      "sourceTables": [
        {
          "projectId": "TABLE_PROJECT_ID",
          "datasetId": "TABLE_DATASET_NAME",
          "tableId": "TABLE_NAME@-360000"
        }
      ],
      "destinationTable": {
        "projectId": "SNAPSHOT_PROJECT_ID",
        "datasetId": "SNAPSHOT_DATASET_NAME",
        "tableId": "SNAPSHOT_NAME"
      },
      "operationType": "SNAPSHOT",
      "writeDisposition": "WRITE_EMPTY"
    }
  }
}

Sostituisci quanto segue:

  • TABLE_PROJECT_ID: l'ID progetto del progetto che contiene la tabella da cui stai creando lo snapshot.
  • TABLE_DATASET_NAME: il nome del set di dati che contiene la tabella da cui stai creando lo snapshot.
  • TABLE_NAME: il nome della tabella da cui stai creando lo snapshot.
  • SNAPSHOT_PROJECT_ID: l'ID progetto del progetto in cui creare lo snapshot.
  • SNAPSHOT_DATASET_NAME: il nome del set di dati in cui creare lo snapshot.
  • SNAPSHOT_NAME: il nome dello snapshot che stai creando.

Per saperne di più su come specificare una versione precedente di una tabella, consulta Accesso ai dati storici utilizzando i viaggi nel tempo.

Controllo dell'accesso alle tabelle

Per controllare l'accesso alle tabelle in BigQuery, consulta Controlla l'accesso alle risorse con IAM.

Quando crei uno snapshot della tabella, l'accesso a livello di tabella allo snapshot della tabella viene impostato come segue:

  • Se lo snapshot della tabella sovrascrive una tabella esistente, l'accesso a livello di tabella per la tabella esistente viene mantenuto. I tag non vengono copiati dalla tabella di base.
  • Se lo snapshot della tabella è una nuova risorsa, l'accesso a livello di tabella per lo snapshot della tabella è determinato dalle policy di accesso del set di dati in cui viene creato lo snapshot della tabella. Inoltre, i tag vengono copiati dalla tabella di base allo snapshot della tabella.

Passaggi successivi