Migrer vers la reprise après sinistre gérée
Cette page explique comment migrer de la réplication interrégionale BigQuery vers la reprise après sinistre gérée par BigQuery.
Présentation
La réplication interrégionale (CRR) et la reprise après sinistre gérée (DR) de BigQuery sont deux fonctionnalités conçues pour améliorer la disponibilité des données et les capacités de reprise après sinistre. Cependant, elles gèrent les pannes régionales de différentes manières. La réplication interrégionale ne permet pas de promouvoir l'instance répliquée secondaire si la région principale n'est pas disponible. En revanche, la DR offre une protection plus complète en permettant un basculement vers l'instance répliquée secondaire, même si la région principale n'est pas disponible. Avec la réplication interrégionale, seul le stockage est répliqué, tandis qu'avec la reprise après sinistre, la capacité de stockage et de calcul est répliquée.
Le tableau suivant décrit les fonctionnalités de la réplication interrégionale et de la reprise après sinistre :
| Fonctionnalité | CRR | DR (reprise après sinistre) |
|---|---|---|
| Processus de réplication initial | Utilise la CRR pour répliquer l'ensemble de données initialement. | La charge initiale est répliquée au préalable avec la CRR avant de migrer un ensemble de données CRR vers un ensemble de données DR. |
| Réplication de promotion | Utilise la réplication standard. | Utilise la réplication turbo. |
| Processus de promotion | Promouvoir au niveau de l'ensemble de données. | Promouvoir au niveau de la réservation (basculement de réservation et promotion d'ensemble de données). Plusieurs ensembles de données peuvent être associés à une même réservation de basculement. La promotion au niveau de l'ensemble de données n'est pas disponible avec la reprise après sinistre. |
| Exécution de la promotion | Via l'interface utilisateur ou une commande LDD basée sur SQL pour chaque ensemble de données. La CLI, les bibliothèques clientes, l'API et Terraform ne sont pas compatibles. | Via l'interface utilisateur ou une commande LDD basée sur SQL pour chaque réservation EPE. La CLI, les bibliothèques clientes, l'API et Terraform ne sont pas compatibles. |
| Mode de basculement | Basculement progressif. | Basculement forcé. |
| Édition requise | Tout modèle de capacité. | Édition Enterprise Plus. |
| Limites | Limites de la réplication interrégionale. | Inclut les limites de la réplication interrégionale et les limites de la reprise après sinistre. |
| Accès en écriture | Les jobs exécutés sous n'importe quel modèle de capacité peuvent écrire dans des ensembles de données répliqués dans la région principale. La base de données secondaire est toujours en lecture seule. | Seuls les jobs exécutés sous des réservations Enterprise Plus peuvent écrire dans des ensembles de données répliqués dans la région principale. Les instances répliquées secondaires d'ensembles de données et de réservations sont toujours en lecture seule. |
| Accès en lecture | Les jobs exécutés sous n'importe quel modèle de capacité peuvent lire des ensembles de données répliqués. | Les jobs exécutés sous n'importe quel modèle de capacité peuvent lire des ensembles de données répliqués. |
Implications de la migration
Les sections suivantes présentent les modifications de coûts et de fonctionnalités qui se produisent lorsque vous migrez vers la reprise après sinistre.
Implications en termes de coûts
Tenez compte des implications suivantes en termes de coûts lorsque vous migrez de la réplication interrégionale vers la reprise après sinistre :
La reprise après sinistre n'est compatible qu'avec l'accès en écriture de l'édition Enterprise Plus, ce qui entraîne des coûts de calcul plus élevés. Vous pouvez lire à partir de n'importe quel modèle de capacité. Les coûts de lecture des jobs existants ne changent donc pas.
La reprise après sinistre utilise la réplication turbo, qui entraîne des coûts supplémentaires en fonction de la paire de régions.
Les tarifs de stockage sont les mêmes pour la réplication interrégionale et la reprise après sinistre.
Pour en savoir plus sur les tarifs, consultez Tarifs.
Implications sur les fonctionnalités
Tenez compte des implications suivantes sur les fonctionnalités lorsque vous migrez de la CRR vers la DR :
La reprise après sinistre n'est compatible qu'avec le basculement au niveau de la réservation. Tous les jobs existants qui reposent sur le basculement au niveau de l'ensemble de données échouent.
Seules les requêtes de l'édition Enterprise Plus peuvent écrire dans l'ensemble de données une fois qu'il est associé à la réservation de reprise après sinistre. Les jobs d'écriture existants qui n'utilisent pas l'édition Enterprise Plus pour leur capacité de calcul échouent.
Avant de commencer
Avant de commencer la migration, familiarisez-vous avec les concepts de réplication interrégionale et de reprise après sinistre gérée.
Pour migrer vers la reprise après sinistre, vous devez remplir les conditions préalables suivantes :
Vous disposez d'un projet Google Cloud actif pour lequel BigQuery est activé.
Vous avez créé et répliqué des ensembles de données avec la réplication entre régions.
Les ensembles de données ont les mêmes emplacements principal et secondaire que ceux que vous souhaitez utiliser pour la reprise après sinistre.
Vous disposez des autorisations nécessaires pour utiliser la reprise après sinistre. Pour en savoir plus sur les autorisations, consultez Avant de commencer.
Migrer de la CRR vers la DR
Les sections suivantes expliquent comment migrer vos ensembles de données de la réplication interrégionale vers la reprise après sinistre. Elles partent du principe que vous avez déjà configuré vos ensembles de données pour la réplication interrégionale.
Créer une réservation de basculement
Pour activer la reprise après sinistre, vous devez créer une réservation de basculement dans la région principale. Configurez votre réservation avec la région principale et la région secondaire appropriées. Les régions principale et secondaire doivent correspondre aux régions de tous les ensembles de données CRR que vous souhaitez migrer vers la DR. Pour créer une réservation de basculement, choisissez l'une des options suivantes :
Console
Dans la console Google Cloud , accédez à la page BigQuery.
Dans le menu de navigation, cliquez sur Gestion des charges de travail, puis sur Créer une réservation.
Dans le champ Nom de la réservation, saisissez un nom pour la réservation.
Dans la liste Emplacement, sélectionnez un emplacement.
Dans la liste Édition, sélectionnez l'édition Enterprise Plus.
Dans la liste Sélecteur de taille de réservation maximale, sélectionnez la taille de réservation maximale.
Facultatif : dans le champ Emplacements de référence, saisissez le nombre d'emplacements de référence pour la réservation.
Le nombre d'emplacements d'autoscaling disponibles est déterminé en soustrayant la valeur Emplacements de référence de la taille maximale de réservation. Par exemple, si vous créez une réservation avec 100 emplacements de référence et une taille de réservation maximale de 400, votre réservation comporte 300 emplacements d'autoscaling. Pour en savoir plus sur les emplacements de référence, consultez la section Utiliser des réservations avec des emplacements de référence et d'autoscaling.
Dans la liste Emplacement secondaire, sélectionnez l'emplacement secondaire.
Pour désactiver le partage d'emplacements inactifs et n'utiliser que la capacité d'emplacements spécifiée, cliquez sur le bouton Ignorer les emplacements inactifs.
Pour développer la section Paramètres avancés, cliquez sur la flèche de développement .
Facultatif : Pour définir la simultanéité de job cible, cliquez sur le bouton Ignorer la simultanéité de job cible automatique, puis saisissez une valeur pour la simultanéité de job cible. La répartition des emplacements est affichée dans le tableau Estimation des coûts. Un résumé de la réservation est affiché dans le tableau Récapitulatif de la capacité.
Cliquez sur Enregistrer.
La nouvelle réservation est visible dans l'onglet Réservations d'emplacements.
SQL
Pour créer une réservation, utilisez l'instruction LDD (langage de définition de données) CREATE RESERVATION.
Dans la console Google Cloud , accédez à la page BigQuery.
Dans l'éditeur de requête, saisissez l'instruction suivante :
CREATE RESERVATION `ADMIN_PROJECT_ID.region-LOCATION.RESERVATION_NAME` OPTIONS ( slot_capacity = NUMBER_OF_BASELINE_SLOTS, edition = ENTERPRISE_PLUS, secondary_location = SECONDARY_LOCATION);
Remplacez les éléments suivants :
ADMIN_PROJECT_ID: ID du projet d'administration propriétaire de la ressource de réservation.LOCATION: emplacement de la réservation. Si vous sélectionnez un emplacement BigQuery Omni, votre option d'édition est limitée à l'édition Enterprise.RESERVATION_NAME: nom de la réservation.Le nom doit commencer et se terminer par une lettre minuscule ou un chiffre, et ne contenir que des lettres minuscules, des chiffres et des tirets.
NUMBER_OF_BASELINE_SLOTS: nombre d'emplacements de référence à allouer à la réservation. Vous ne pouvez pas définir les optionsslot_capacityeteditiondans la même réservation.SECONDARY_LOCATION: emplacement secondaire de la réservation. En cas de panne, tous les ensembles de données associés à cette réservation basculeront vers cet emplacement.
Cliquez sur Exécuter.
Pour en savoir plus sur l'exécution des requêtes, consultez Exécuter une requête interactive.
Associer l'ensemble de données à la réservation
Une fois la réservation de basculement créée, associez-lui votre ou vos ensembles de données interrégionaux. Cela active le basculement pour tous les ensembles de données associés. Pour associer l'ensemble de données à la réservation, choisissez l'une des options suivantes :
Console
Dans la console Google Cloud , accédez à la page BigQuery.
Dans le menu de navigation, cliquez sur Gestion des charges de travail.
Cliquez sur l'onglet Réservations d'emplacements.
Cliquez sur la réservation à laquelle vous souhaitez associer un ensemble de données.
Cliquez sur l'onglet Ensembles de données de basculement connectés.
Cliquez sur Associer l'ensemble de données de basculement.
Saisissez le nom de l'ensemble de données que vous souhaitez associer à la réservation.
Cliquez sur Ajouter.
SQL
Pour associer un ensemble de données à une réservation, utilisez l'instruction LDD ALTER SCHEMA SET OPTIONS.
Dans la console Google Cloud , accédez à la page BigQuery.
Dans l'éditeur de requête, saisissez l'instruction suivante :
ALTER SCHEMA `DATASET_NAME` SET OPTIONS ( failover_reservation = ADMIN_PROJECT_ID.RESERVATION_NAME);
Remplacez les éléments suivants :
DATASET_NAME: nom de l'ensemble de données.ADMIN_PROJECT_ID.RESERVATION_NAME: nom de la réservation à laquelle vous souhaitez associer l'ensemble de données.
Cliquez sur Exécuter.
Pour en savoir plus sur l'exécution des requêtes, consultez Exécuter une requête interactive.
Vérifier la configuration
Pour vérifier l'état de votre configuration, interrogez la vue INFORMATION_SCHEMA.SCHEMATA_REPLICAS.
PROJECT_ID.`region-REGION`.INFORMATION_SCHEMA.SCHEMATA_REPLICAS[_BY_PROJECT]
Vérifiez que les ensembles de données sont associés à la bonne réservation dans les bonnes régions.
Remplacez l'élément suivant :-
PROJECT_ID(facultatif) : ID de votre projet Google Cloud . Si non spécifié, le projet par défaut est utilisé. -
REGION: tout nom de région d'ensemble de données. Par exemple,`region-us`.
Exemples
L'exemple suivant vous guide à travers les étapes de migration de la CRR vers la DR, avec des exemples pratiques utilisant GoogleSQL. Pour cet exemple, supposons les éléments suivants :
Vous travaillez dans un projet nommé
myproject.Vous avez déjà créé un ensemble de données nommé
mydatasetet l'avez configuré avec la réplication interrégionale.La région principale de
mydatasetestus-central1et la région secondaire estus-west1.
Pour commencer à migrer votre ensemble de données vers la DR, créez d'abord une réservation avec l'édition Enterprise Plus. Dans cet exemple, le nom de la réservation est myreservation.
CREATE RESERVATION `myproject.region-us-central1.myreservation`
OPTIONS (
slot_capacity = 0,
edition = ENTERPRISE_PLUS,
autoscale_max_slots = 50,
secondary_location = 'us-west-1');
Une fois la réservation créée, vous pouvez lui associer l'ensemble de données. L'exemple suivant associe l'ensemble de données à la réservation :
ALTER SCHEMA
`myproject.mydataset`
SET OPTIONS (
failover_reservation = 'myproject.myreservation');
Vérifiez ensuite que l'ensemble de données a bien été associé.
SELECT
failover_reservation_project_id,failover_reservation_name,
FROM
`myproject`.`region-us-west1`.INFORMATION_SCHEMA.SCHEMATA_REPLICAS
WHERE
schema_name='mydataset';
Les résultats de cette requête doivent ressembler à ce qui suit :
+---------------------------------+---------------------------+ | failover_reservation_project_id | failover_reservation_name | +---------------------------------+---------------------------+ | myproject | myreservation | | myproject | myreservation | +---------------------------------+---------------------------+
Étape suivante
Pour en savoir plus sur la réplication interrégionale, consultez Réplication interrégionale d'ensembles de données.
Pour en savoir plus sur la reprise après sinistre gérée, consultez Reprise après sinistre gérée.