Crea alertas de canalización

En esta página, se describe cómo configurar alertas para canalizaciones de datos en Cloud Data Fusion.

Puedes crear alertas a través de los siguientes servicios:

  • Alertas a través de Cloud Data Fusion: Puedes configurar estas alertas cuando diseñas una canalización por lotes en Cloud Data Fusion. Después de implementar la canalización, no podrás agregar ni editar una alerta.

  • Alertas basadas en registros a través de Cloud Monitoring: Puedes configurar estas alertas en la consola de Google Cloud antes y después de implementar la canalización.

Antes de comenzar

Necesitas una instancia de Cloud Data Fusion. Para obtener más información, consulta Cómo crear una instancia de Cloud Data Fusion.

Agrega una alerta en Cloud Data Fusion

  1. Abre tu instancia.

    1. En la Google Cloud consola, ve a la página de Cloud Data Fusion.

    2. Para abrir la instancia en Cloud Data Fusion Studio, haz clic en Instancias y, luego, en Ver instancia.

      Ir a Instancias

  2. Ve a la página de Studio en la que diseñas tu canalización.

  3. Haz clic en Configurar > Alertas de canalización > Agregar.

  4. Selecciona y configura la alerta. Para obtener más información sobre cómo configurar las alertas, consulta Alertas de canalización por lotes.

  5. Después de configurar la alerta, haz clic en Validar para verificar si hay errores y, luego, en Confirmar.

Crea una alerta en Monitoring

  1. Habilita Cloud Logging en tu instancia de Cloud Data Fusion.

  2. Crea una alerta basada en registros.

    1. En la Google Cloud consola, ve a la página Explorador de registros.

      Ir al Explorador de registros.

      Esta página te permite almacenar, consultar, actualizar y borrar datos.

    2. Ingresa la siguiente consulta:

      resource.type="cloud_dataproc_cluster"
logName="projects/PROJECT_ID/logs/datafusion-pipeline-logs"
resource.labels.project_id="PROJECT_ID"
severity=ERROR
jsonPayload.message=~"Pipeline '.*' failed."

      Reemplaza PROJECT_ID por el ID del proyecto.

    3. Haz clic en Crear alerta y configúrala.

Solo se genera una alerta cuando la canalización se ejecuta en un clúster de Dataproc y falla. En el caso de los errores de creación de clústeres de Dataproc, no se genera la alerta.

¿Qué sigue?