Tag: AZURE-DATABRICKS
Subí una biblioteca jar en mi clúster en Databricks siguiendo este tutorial, sin embargo no he podido importar la biblioteca ni utilizar los métodos de la biblioteca desde el cuaderno de Databricks. No he encontrado foros o documentación que aborden este tema, así que no estoy seguro si es posible . . . Read more
El objetivo es tomar la fecha de la tabla delta y, si es la fecha de ayer, es decir, si no se encuentra la fecha de transacción, entonces en la parte de ‘else’ se resta la fecha de ayer a la fecha actual y se procesa otro cuaderno en un . . . Read more
Estamos enfrentando un problema de acceso para conectar a la cuenta de almacenamiento de Azure. El cortafuegos está habilitado en la cuenta de almacenamiento para proporcionar acceso solo a IPs específicas. La cuenta de almacenamiento se encuentra alojada en Azure South Central US. Estamos intentando acceder a datos desde Azure . . . Read more
Estoy en una situación en la que puedo ejecutar correctamente el fragmento de código siguiente en Azure Databricks desde un CMD separado. %run ./HSCModule Sin embargo, me encuentro con problemas al incluir ese fragmento de código con otro código Scala que importa los paquetes siguientes y obtengo el siguiente error. . . . Read more
Me gustaría iterar sobre algunos archivos en una carpeta que tiene su ruta en los Repositorios de Databricks. ¿Cómo se haría esto? No parece que pueda acceder a los archivos en los Repositorios. He añadido una imagen que muestra a qué carpetas me gustaría acceder (las carpetas dbrks y sql). . . . Read more