Tag: SQOOP
Mi muestra de datos de RDBMS tiene las siguientes entradas: +——–+———–+———-+———–+ | custid | fisrtname | lastname | city | +——–+———–+———-+———–+ | 1 | Arun | Kumar | chennai | | 2 | srini | vasan | chennai | | 3 | vasu | devan | bangalore | | 4 . . . Read more
Tengo una tabla no particionada en Hive que se llena con 600 000 registros utilizando un lote. Este lote borra los datos de la tabla antes de llenarla. Estoy intentando exportar estos datos a una tabla particionada de Oracle utilizando sqoop. Cuando se exporta por primera vez, la exportación de . . . Read more
Estoy tratando de utilizar una conexión desde RDS en EMR a través de sqoop con el siguiente comando: sqoop list-tables \ –connect jdbc:postgresql://sportsdb.cxri########.us-east-2.rds.amazonaws.com:5432/SportsDB \ –username postgres \ –password mypassword Sin embargo, la conexión siempre expira. Según mi investigación, este error está relacionado con RDS siendo accesible públicamente y si las . . . Read more
Tan pronto como mi clúster de EMR estuvo listo para ser ejecutado. Comencé a enfrentar algunos problemas al listar bases de datos e importar sqoop. Aparentemente, sqoop se ha instalado normalmente y está funcionando correctamente cuando escribo “sqoop help” en la terminal de Linux. Como puedes ver, el comando es . . . Read more
SQOOP no puede crear una tabla en formato PARQUET en Hive. sqoop import –connect jdbc:mysql://localhost:3306/sqooppractice –username root –password hortonworks1 -m 1 –delete-target-dir –target-dir /user/hduser/sqoop/importcustomer –driver com.mysql.jdbc.Driver –fetch-size 1000 –table customer –fields-terminated-by ‘~’ –hive-import –hive-database hivepractice –hive-table customer_parquet –as-parquetfile; Error: Causado por: MetaException(mensaje: La tabla hivepractice.customer_parquet no cumple con las comprobaciones . . . Read more