Tag: DELTA-LAKE
¿Cuáles son las principales diferencias entre las tablas gobernadas por S3 Lake Formation y las tablas de Databricks Delta? Parecen bastante similares.
Cuando consulto mi tabla delta desde Synapse Studio, puedo ver los datos correctamente. Pero cuando me conecto a través de Data Studio usando una conexión SQL (o Databricks), parece que no puedo consultarla: CREATE or alter view stock as SELECT * FROM OPENROWSET( BULK ‘https://tesdvsrc18732.dfs.core.windows.net/adlse-fr/be_stock/’, FORMAT = ‘DELTA’ ) AS . . . Read more
He creado un esquema manual utilizando structtype, etc. Tengo un nivel de plata 1 en ALDS que contiene archivos delta sin procesar. Necesito aplicar el esquema manual a este nivel de plata 1, que luego se escribirá como nivel de plata 2. Así que simplemente necesito leer los datos de . . . Read more
Supongamos que tengo un dataframe en streaming y lo estoy escribiendo en Databricks Delta Lake: someStreamingDf.writeStream .format(“delta”) .outputMode(“append”) .start(“targetPath”) y luego creo una tabla delta a partir de él: spark.sql(“CREATE TABLE <tbl_name> USING DELTA LOCATION ‘<targetpath>’ TBLPROPERTIES (‘delta.autoOptimize.optimizeWrite’=true)”) lo que falla con AnalysisException: The specified properties do not match the . . . Read more
Estaba intentando eliminar datos de la tabla Delta. Cuando ejecuto la consulta siguiente, estoy obteniendo alrededor de 500 o 1000 registros de datos. SELECT * FROM table1 inv join (SELECT col1, col2, col2, min(Date) minDate, max(Date) maxDate FROM table2 a GROUP BY col1, col2, col3) aux on aux.col1 = inv.col1 . . . Read more