Sqoop Imported Failed: невозможно преобразовать SQL-тип 2005 при попытке импортировать таблицу Oracle

Question

При попытке импортировать таблицу из базы данных Oracle в виде файла паркета возникает следующая ошибка.

ERROR tool.ImportTool: Imported Failed: Cannot convert SQL type 2005 

Этот вопрос уже поднимался here, но предложенное решение не помогает мне.

Я пытаюсь импортировать таблицу из командной строки с помощью следующей команды с параметрами в <> заполняются соответствующими значениями:

sqoop import --connect jdbc:oracle:thin:@<host>:<port>/<service> --username <user> --password <password> --hive-import --query 'SELECT * FROM <DB>.<table> WHERE $CONDITIONS' --split-by <ID> --hive-database <HIVE_DB> --hive-table <HIVE_TABLE> --incremental append --check-column <ID> --map-column-hive <ID>=integer --compression-codec=snappy --target-dir=/user/hive/<FOLDER> --as-parquetfile --last-value 0 -m 1

Кто-нибудь знает, как решить эту проблему? Я не специалист по базе данных sqooped Oracle, но, похоже, это связано с наличием типов данных CLOB. Я выполняю эту команду на CDH 5.8 с sqoop 1.4.6

Запуск задания без --as-parquetfile приводит к выполнению задания sqoop, которое кажется застрявшим на карте 0% уменьшения 0%.

Answer 1

Используйте --map-column-java, чтобы нанести на карту clob datatype на Java String.

Например, у вас есть столбец C1. Использование:

--map-column-java C1=String 

Проверьте, пожалуйста, docs.