En esta página, se presenta la solución de HPC de AlphaEvolve, que te permite ejecutar experimentos de optimización de código escalables y en contenedores Google Cloud.
AlphaEvolve se basa en un bucle evolutivo iterativo: genera código candidato, mide la aptitud del código y envía los resultados a la API de AlphaEvolve para guiar las iteraciones futuras. La solución de HPC de AlphaEvolve implementa una infraestructura distribuida con Cluster Toolkit, Batch y Pub/Sub. Trata cada evaluación de candidatos como un trabajo aislado y efímero que se ejecuta en máquinas virtuales (VMs) en contenedores con muchos recursos.
Cuándo usar la solución de HPC de AlphaEvolve
En lugar de ejecutar evaluaciones de forma local o en instancias de Cloud Run, usa la solución de HPC de AlphaEvolve si tu carga de trabajo no se ajusta a los entornos estándar:
Las evaluaciones tardan demasiado: Los problemas de tu código son complejos y tardan demasiado en ejecutarse de forma local, o bien superan los límites de recursos y de tiempo de ejecución de las instancias individuales de Cloud Run.
Necesitas hardware especializado: Tus evaluaciones requieren aceleradores de hardware (como GPUs o TPUs) o familias de máquinas de HPC optimizadas para procesamiento (como las instancias H3).
Necesitas paralelismo a gran escala: Deseas compilar y evaluar varias realizaciones candidatas de forma simultánea en entornos aislados.
Quieres infraestructura como código (IaC): Deseas una configuración repetible y automatizada que simplifique la implementación y la eliminación de clústeres con muchos recursos para ahorrar esfuerzo y costo.
Qué ofrece la solución de HPC de AlphaEvolve
La solución de HPC de AlphaEvolve proporciona un flujo de extremo a extremo para la configuración, la implementación y la ejecución de la infraestructura necesaria para los problemas de optimización de AlphaEvolve:
Implementación de la infraestructura base: Usa Cluster Toolkit para implementar la infraestructura base necesaria para ejecutar optimizaciones. En este paso, se activan las APIs necesarias, se configuran las cuentas de servicio y se aprovisionan un tema de Pub/Sub y un tiempo de ejecución de Colab Enterprise. Esta infraestructura base se puede reutilizar para varios problemas de optimización.
Configuración del entorno de software: Configura e implementa el entorno de software para tu problema de optimización específico.
Ejecución de experimentos: El inicio, la detención y el análisis de un experimento se realizan desde un notebook de Jupyter que se ejecuta en Colab Enterprise conectado al tiempo de ejecución personalizado de Colab Enterprise.
Cómo funciona AlphaEvolve
Después de configurar e implementar la solución, el proceso de optimización de AlphaEvolve real se ejecuta de la siguiente manera:
Generación: El controlador invoca la API de AlphaEvolve (con tecnología de Gemini) para proponer candidatos de código en función de una métrica objetivo y ejecuciones exitosas anteriores.
Evaluación: Los candidatos se evalúan en paralelo en cuanto a corrección y rendimiento como trabajos de Batch.
Almacenamiento: Los archivos candidatos generados, las revisiones del código fuente y las métricas de prueba numéricas se archivan en un bucket seguro de Cloud Storage. Debido a que la solución de HPC de AlphaEvolve almacena artefactos experimentales en el bucket de Cloud Storage, puedes eliminar la infraestructura cuando no esté en uso.
Comentarios: Los resultados y los registros de estadísticas se envían a la API de AlphaEvolve, lo que le permite aprender de los éxitos y las fallas, y muestrear de forma inteligente un mejor código en la próxima generación.
La solución de HPC de AlphaEvolve implementa los recursos como se describe
en el siguiente diagrama de arquitectura.
Implementa la solución de HPC de AlphaEvolve
Para implementar la infraestructura base, compilar las imágenes de contenedor y ejecutar tus experimentos de optimización, haz lo siguiente:
- Ve al repositorio de GitHub de HPC de AlphaEvolve y sigue las instrucciones.