Problèmes connus

Ce document décrit les problèmes connus que vous pouvez rencontrer lorsque vous exécutez des instances ou des clusters Compute Engine optimisés pour l'IA. Pour obtenir d'autres ressources de dépannage, consultez les guides suivants :

Problèmes

La section suivante liste les problèmes connus et les solutions de contournement pour AI Hypercomputer.

Interruptions de charges de travail sur les VM A4 en raison de problèmes de micrologiciel pour les GPU NVIDIA B200

NVIDIA a identifié deux problèmes de micrologiciel pour les GPU B200, qui sont utilisés par les instances de machines virtuelles (VM) A4. Ces problèmes peuvent entraîner des interruptions de la charge de travail, par exemple lorsque la commande nvidia-smi ne répond pas. Si vous remarquez des interruptions de charge de travail sur les VM A4, vérifiez si une ou plusieurs des conditions suivantes sont remplies :

  • Le temps d'activité de la VM (lastStartTimestamp) dépasse 65 jours.
  • Les journaux affichent un message d'erreur Xid 149 qui mentionne 0x02a.

Si l'une de ces conditions est remplie, vous devez réinitialiser les GPU associés à vos VM A4. Pour éviter de futures interruptions de votre charge de travail en raison de problèmes de micrologiciel, nous vous recommandons de réinitialiser vos GPU au moins une fois tous les 60 jours. Pour en savoir plus, consultez Réinitialiser des GPU.

Le serveur de métadonnées peut afficher d'anciennes métadonnées physicalHost

Après avoir rencontré une erreur d'hôte ou utilisé l'API de signalement d'hôte défectueux pour déplacer une instance de calcul vers un nouvel hôte, lorsque vous interrogez le serveur de métadonnées, il peut afficher les métadonnées physicalHost de l'hôte précédent de l'instance de calcul.

Pour contourner ce problème, effectuez l'une des opérations suivantes :