Tag: AWS-GLUE
Tengo un AWS Glue Crawler que se ejecuta dos veces al día y popula datos en Athena. Quicksight toma los datos de Athena y los muestra en un panel de control. Estoy implementando LastDataRefresh (Datetime) para mostrarlo en un panel de control de Quicksight. ¿Hay alguna forma de obtener la . . . Read more
Estoy utilizando AWS Glue Crawler. Quiero ejecutar este crawler dos veces al día. Tengo algunas preguntas al respecto: ¿El tiempo que configuramos para ejecutarlo será en UTC o dependerá de la región en la que estemos? Por ejemplo, ¿para “us-east-1” el tiempo será en EST? Quiero ejecutar el Crawler dos . . . Read more
Pude escribir y ejecutar con éxito un trabajo de Glue para llevar datos desde DB2 a los buckets de S3. Pero, ¿puedo hacer lo contrario? ¿Puedo escribir datos en una tabla de DB2 extrayendo datos de los buckets de S3 (archivos parquet)?
Resumen del problema: Fallo al consultar datos a través de AWS Athena en una tabla Delta Lake (en S3). Creo que el problema ocurre específicamente si la cuenta tiene habilitada Lake Formation. Pasos para replicar: Asegúrese de hacer esto en una cuenta de AWS nueva, o una cuenta que aún . . . Read more
Estoy tratando de escribir un AWSGlue DynamicFrame en una base de datos PostgreSQL con una escritura JDBC. La tabla de destino incluye una columna de tipo Enum. Comienzo seleccionando las columnas de interés del DataFrame subyacente de PySpark y luego convierto el DataFrame en un DynamicFrame: <h1>Seleccionar columnas de interés</h1> . . . Read more