Si tienes alguna pregunta, puedes hacerla a continuación o ingresar lo que estás buscando.
Tengo una instancia de CDAP data fusion local con múltiples espacios de nombres. ¿Cómo puedo activar la canalización utilizando operadores de airflow? He intentado explorar los operadores disponibles de airflow y esta página, pero no es muy útil: https://cloud.google.com/data-fusion/docs/reference/cdap-reference#startabatch_pipeline.
Tengo un pipeline que hace una solicitud a una API. Y me gustaría parametrizar las marcas de tiempo de inicio y fin en la URL dentro del complemento http. La marca de tiempo de fin es -2 horas desde la ejecución, por lo que sería fácil usar una macro con . . . Read more
¿El proceso de fusión de datos puede procesar archivos CSV de GCS en lotes? Necesito procesar múltiples carpetas que contienen archivos CSV (con estructuras diferentes) en Big Query en mi proyecto actual, y se requiere que use Data Fusion. Intenté simplemente conectar un nodo GCS con la ruta a la . . . Read more