Tag: SQOOP
El tipo de mysql es datetime, hive es string o timestamp. todo esto ocurre en la tabla de hive mysql 2016-10-13 15:18:10 2016-10-13 15:18:10 2016-10-13 15:18:10 2016-10-13 15:18:10 2016-10-13 15:18:10 2016-10-13 15:18:10 hive 2016-10-13 15:18:10.0 2016-10-13 15:18:10.0 2016-10-13 15:18:10.0 2016-10-13 15:18:10.0 2016-10-13 15:18:10.0 2016-10-13 15:18:10.0
No soy capaz de entender la diferencia entre Temporary rootdir y bindir en un trabajo de Sqoop. ¿Alguien puede explicarlo? Sería genial.
El siguiente comando funciona bien desde la terminal, pero cuando lo ejecuto desde Oozie, me da un error: bash sqoop import –connect jdbc:mysql://172.16.16.128:3306/employees — username=hive –password=hive –driver com.mysql.jdbc.Driver –query ‘select * from employee.testtable where 1=1 AND $CONDITIONS’ –m 1 –target-dir ‘/user/hive/warehouse/test.db/testtable’ –hive-import –hive-table test.testtable –hive-drop-import-delims –hive-overwrite –hs2-url jdbc:hive2://hivehostname:10000/default; ERROR sqoop.Sqoop: . . . Read more
Estoy intentando transferir todos los archivos “part*” de un directorio directamente desde un directorio HDFS a un servidor SFTP. Todos los archivos en la carpeta HDFS son bastante grandes, por lo que no quiero copiarlos en el sistema de archivos local. La configuración actual es la siguiente: hdfs dfs -text . . . Read more
He creado la siguiente tabla en MySQL bajo la base de datos school: CREATE TABLE student ( id int NOT NULL, first_name varchar(100) DEFAULT NULL, last_name varchar(100) DEFAULT NULL, email varchar(100) DEFAULT NULL, PRIMARY KEY (id) ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci Tengo los siguientes datos en HDFS en el archivo . . . Read more