Supprimer les objets dont vous n'avez plus besoin vous aide à réduire les coûts de stockage, à respecter les exigences de conservation des données et à organiser vos buckets. Cloud Storage accepte deux méthodes principales pour supprimer des objets :
- Suppression d'un seul objet : supprime des objets individuels pour des mises à jour ciblées.
- Suppression groupée d'objets : supprime plusieurs objets simultanément ou selon un calendrier automatisé.
Pour chaque méthode de suppression, Cloud Storage fournit différents outils permettant de supprimer des objets manuellement, de manière programmatique ou à l'aide de règles automatisées. Passez en revue ces méthodes de suppression et les outils disponibles pour choisir l'approche la mieux adaptée à votre charge de travail.
Pour obtenir des instructions détaillées sur la suppression d'objets, consultez Supprimer des objets.
Suppression d'un seul objet
La suppression d'un seul objet permet de contrôler précisément des données spécifiques. En général, vous supprimez des objets individuels lorsque vous devez effectuer des mises à jour immédiates et ciblées des données de votre bucket. Voici quelques cas d'utilisation courants de la suppression d'un seul objet :
Corriger les erreurs : supprimer un objet que vous avez importé par erreur ou un objet contenant des données incorrectes.
Nettoyage : suppression manuelle des objets ou des journaux temporaires après l'exécution d'une tâche.
Logique d'application : suppression automatique d'un objet lorsqu'un événement d'application se produit, par exemple lorsqu'un utilisateur supprime une photo de profil.
Sécurité et conformité : suppression d'objets pour supprimer les informations sensibles.
Outils de suppression d'un seul objet
Pour supprimer un seul objet de votre bucket, utilisez l'un des outils suivants. Chaque outil envoie une requête DELETE individuelle par objet.
| Outil | Description |
|---|---|
| ConsoleGoogle Cloud | Supprime un objet individuel dans la console Google Cloud . |
| Google Cloud CLI | Supprime un objet à l'aide de la commande gcloud storage rm. |
| Bibliothèques clientes | Supprime un objet par programmation à l'aide d'un langage compatible, tel que C++, C#, Go, Java, Node.js, PHP, Python ou Ruby. |
| API REST | Supprime un objet à l'aide de l'API JSON ou de l'API XML. |
Suppression groupée d'objets
La suppression groupée d'objets est conçue pour les opérations à haute efficacité sur de grands ensembles de données. Utilisez la suppression groupée pour gérer les coûts de stockage et automatiser l'hygiène des données dans les buckets. Voici quelques cas d'utilisation courants de la suppression groupée d'objets :
Optimisation des coûts : supprimez les grands ensembles de données dont vous n'avez plus besoin pour les opérations, comme les anciens journaux ou les artefacts de compilation temporaires.
Automatisation de la conformité : application automatique des règles de conservation des données en supprimant les objets après une période de conservation spécifique, par exemple 30 jours.
Migration ou désactivation de buckets : suppression de millions ou de milliards d'objets lors de la migration de données ou de la clôture d'un projet.
Nettoyage du pipeline de données : suppression des objets de traitement intermédiaires après qu'un pipeline a généré un rapport ou un ensemble de données final.
Outils de suppression groupée d'objets
Pour supprimer des objets de manière groupée, utilisez l'un des outils suivants. Ces outils sont optimisés pour un débit plus élevé et des frais généraux réduits par rapport aux requêtes individuelles.
| Outil | Description |
|---|---|
| ConsoleGoogle Cloud | Supprime jusqu'à un million d'objets de manière interactive. Une fois que vous avez lancé une requête de suppression, Cloud Storage la traite en arrière-plan. Vous pouvez vérifier l'état de votre suppression groupée en cliquant sur le bouton Notifications ( notifications) dans l'en-tête de la console Google Cloud . |
| Google Cloud CLI | Supprime tous les objets ayant un préfixe commun à l'aide de la commande gcloud storage rm --recursive. Cette commande est adaptée aux suppressions groupées de petite à moyenne envergure à partir de la ligne de commande. |
| API XML de suppression de plusieurs objets | Supprime jusqu'à 1 000 objets de manière programmatique en une seule requête Lorsque vous utilisez l'API XML pour supprimer plusieurs objets, Cloud Storage génère des journaux d'audit pour l'accès aux données. Si vous activez les journaux d'audit des accès aux données, ils incluent des informations sur la requête globale et les suppressions d'objets individuels. Pour en savoir plus, consultez Journaux d'audit pour l'API XML de suppression de plusieurs objets. L'API XML de suppression de plusieurs objets présente les limites suivantes :
|
| Opérations de stockage par lot | Supprime jusqu'à des milliards d'objets en fonction d'un fichier manifeste à l'aide d'un service entièrement géré avec suivi et tentatives intégrés. Utilisez les opérations de stockage par lot pour effectuer les tâches suivantes :
|
| Gestion du cycle de vie des objets | Supprime automatiquement les objets en fonction des règles de cycle de vie définies par l'utilisateur, comme l'âge ou la classe de stockage des objets. Pour supprimer des objets de manière groupée, configurez une règle de gestion du cycle de vie des objets sur votre bucket. Définissez la condition Age sur 0 jours et l'action sur Delete. Une fois la règle créée, Cloud Storage procède à la suppression groupée de manière asynchrone.
|
| Requêtes API par lot | Regroupe plusieurs requêtes de suppression dans une seule requête HTTP lorsque vous utilisez des bibliothèques clientes compatibles ou l'API JSON directement. Ce regroupement réduit la latence et la charge de connexion côté client. |
Choisir une méthode de suppression
La méthode et l'outil optimaux pour supprimer des objets dépendent du nombre d'objets et des exigences de votre workflow. Utilisez la matrice de décision suivante pour sélectionner une approche pour votre cas d'utilisation :
| Cas d'utilisation | Méthode de suppression | Outil recommandé |
|---|---|---|
| Supprimer un objet individuel ou un petit nombre d'objets spécifiques | Suppression d'un seul objet | Google Cloud console, gcloud storage rm, bibliothèques clientes ou API REST |
| Supprimer jusqu'à 1 000 objets dans une seule requête programmatique | Suppression groupée d'objets | API XML de suppression de plusieurs objets, CLI Amazon S3 ou bibliothèques clientes compatibles avec Amazon S3 (telles que Boto3) |
| Supprimer des objets qui partagent un préfixe commun | Suppression groupée d'objets | gcloud storage rm --recursive |
| Supprimer jusqu'à un million d'objets de manière interactive dans le navigateur | Suppression groupée d'objets | ConsoleGoogle Cloud |
| Supprimer des millions ou des milliards d'objets de manière asynchrone avec le suivi intégré | Suppression groupée d'objets | Opérations de stockage par lot |
| Supprimer automatiquement des objets en fonction de conditions (comme l'âge ou la classe de stockage) | Suppression groupée d'objets | Gestion du cycle de vie des objets |
Étapes suivantes
- Supprimez un bucket lorsque vous n'en avez plus besoin.
- Découvrez la gestion des versions d'objets pour conserver plusieurs versions d'un objet dans le même bucket.
- Configurez la gestion du cycle de vie des objets pour automatiser la suppression des objets en fonction de conditions personnalisées.
- Effectuez des suppressions d'objets à grande échelle avec les opérations Storage par lot.
- Protégez les objets contre toute suppression accidentelle à l'aide de la suppression réversible.
- Appliquez des règles de conservation des données à l'aide des fonctionnalités de verrou de conservation des objets et de verrou de bucket.