Introducción a la migración a BigQuery

El Servicio de migración de BigQuery es una solución integral que te permite migrar tu almacén de datos a BigQuery. Proporciona herramientas para cada fase de la migración, incluidas la evaluación y la planificación, la traducción de SQL para una variedad de dialectos de SQL y la transferencia de datos para ayudarte a realizar la transición de tus cargas de trabajo con un esfuerzo manual mínimo.

Para acceder al Servicio de migración de BigQuery, en la consola de Google Cloud , ve a la página BigQuery y, luego, selecciona Migración > Servicios.

Funciones y herramientas de migración

Con el Servicio de migración de BigQuery, puedes hacer lo siguiente:

También puedes usar las siguientes herramientas de código abierto para ayudarte con el proceso de migración:

  • Herramienta de migración de datos: Usa la herramienta de migración de datos para automatizar la migración de tu almacén de datos a BigQuery. La herramienta usa el Servicio de transferencia de datos de BigQuery, los servicios de traducción de BigQuery y la herramienta de validación de datos para transferir datos, traducir y validar consultas de DDL, DML y consultas en SQL.
  • Herramienta de validación de datos: Después de migrar tus datos a BigQuery, ejecuta la herramienta de validación de datos para validar que las tablas de origen y las tablas de destino coincidan.
  • Asignador de permisos de BigQuery: Usa el asignador de permisos para automatizar la creación y el mantenimiento de mapas de permisos modificables por el usuario. Puedes usar el asignador de permisos para analizar y conciliar los permisos y los grupos de usuarios duplicados, y generar informes de errores. La herramienta genera secuencias de comandos de JSON y Terraform para la creación de grupos, usuarios y vinculaciones de BigQuery.
  • Plantillas de Managed Service para Apache Airflow: Usa las plantillas de Managed Service para Apache Airflow para simplificar la creación de DAG de Airflow nuevos o la migración de trabajos organizados existentes de entornos locales a la nube.
  • Cloud Foundation Fabric: Consulta los ejemplos y módulos de Terraform para Google Cloud, incluido un plano de zona de destino para toda la organización, planos de referencia para patrones de red y funciones de productos, y una biblioteca de módulos adaptables.

Fuentes de migración

El Servicio de migración de BigQuery admite la migración de los siguientes almacenes de datos a BigQuery:

Cuotas

Las cuotas y los límites se aplican al número de trabajos y al tamaño de los archivos. Para obtener más información sobre las cuotas y los límites de los servicios de migración, consulta Cuotas y límites.

Precios

No se aplican cargos por usar la API de migración de BigQuery. Sin embargo, se aplican las tarifas normales al almacenamiento que se usa para los archivos de entrada y salida. Para obtener más información, consulta los precios de almacenamiento.

Además, puedes usar la funcionalidad de estimación de costos en Google Cloud Migration Center para generar una estimación de los costos de ejecución de la configuración del almacén de datos que migras a BigQuery. Para obtener más información, consulta Inicia una estimación de costos y Especifica los requisitos de almacenamiento de datos.

¿Qué sigue?