26
ответов

Можно ли sqoop импортировать вложенные запросы и сложные объединения? [Дубликат]

Я пытаюсь выполнить следующую команду для импорта набора результатов запроса в sqoop sqoop import -P \ --connect jdbc: mysql: // dbhost / loudacre \ --username training \ --target-dir / NET-ID / loudacre / ...
вопрос задан: 23 October 2014 14:32
1
ответ

Невозможно построить куб с помощью Apache Kylin

Я установил Apache Kylin в образ HDP Sandbox от Hortonworks. После этого я подключил Apache Kylin к нашему хранилищу данных Microsoft SQL, и когда я пытаюсь построить куб, процесс завершается ошибкой ....
вопрос задан: 25 June 2019 20:45
1
ответ

настройка производительности импорта sqoop с помощью жесткого кодирования граничных значений

Я пытаюсь увеличить время импорта sqoop при выполнении импорта sqoop с разделением по ключам и сопоставителям. Создает запрос на поиск граничного значения (19.01.09 00:32:37 INFO db ....
вопрос задан: 16 January 2019 07:54
0
ответов

Пакетная вставка в Sybase IQ

Sybase IQ - это база данных Columnar. Я думаю, что нужно массово вставить 100 миллионов записей из Hive в таблицу Sybase IQ с помощью Sqoop (20 картографов). Говорят, что база данных Columnar не обеспечивает хорошую производительность ...
вопрос задан: 18 March 2019 14:38
0
ответов

HDP Sandbox SQOOP не удалось из-за ошибки разрешения

Ниже приведено сообщение об ошибке: Невозможно переместить источник hdfs: //sandbox-hdp.hortonworks.com: 8020 / user / maria_dev / DimDepartmentGroup / part-m-00000 в место назначения hdfs: //sandbox-hdp.hortonworks.com: 8020 / ...
вопрос задан: 5 March 2019 20:22
0
ответов

java.sql.SQLException: ORA-00936: отсутствует выражение и нет столбцов для генерации для ClassWriter при импорте sqoop

Я пытаюсь импортировать таблицы в куст с помощью sqoop, но при импорте таблицы отображается сообщение об ошибке, отсутствует выражение. Как ее решить, пожалуйста, помогите мне
вопрос задан: 1 March 2019 06:24
0
ответов

Контейнер [xxx] работает за пределом памяти PHYSICAL

Создание базового хранилища данных с hive2, установленным через Ambari 2.7.3.0 (hortonworks DP). Услуги, которые я выбираю: HDFS, YARN + MapReduce2, Tez, Hive, Pig, Sqoop, Oozie, Zookeeper, Ambari ...
вопрос задан: 21 February 2019 16:22
0
ответов

Импорт данных в sqoop с использованием нескольких условий в предложении WHERE

Я пытаюсь импортировать данные из таблицы на основе нескольких условий в hdfs, используя sqoop и пробуя следующий код: --table accounts \> --where "state = 'CA'" и acct_close_dt имеет значение NULL и $ ...
вопрос задан: 13 February 2019 10:30
0
ответов

невозможно экспортировать данные Json из HDFS в Oracle с помощью экспорта sqoop

во время экспорта sqoop не могу разобрать входные данные. исключение ниже. java.lang.RuntimeException: Не удается проанализировать входные данные: «DeptId: 888». Причина: java.lang.NumberFormatException From Oracle ...
вопрос задан: 18 January 2019 20:08
0
ответов

Sqoop при экспорте в teradata выдает ошибку, когда содержимое имеет разделитель запятой

У меня есть таблица с 10 столбцами, в которой один столбец является описанием строки типа данных и может иметь произвольный текст максимальной длины 255. В моем столбце много специальных символов, таких как () $ & amp; * ,. ...
вопрос задан: 17 January 2019 08:05
0
ответов

Как использовать Sqoop для объединения нескольких таблиц MySQL в одну таблицу Hive

У меня есть две таблицы MySQL в разных экземплярах MySQL, они одинаковы в структуре таблицы. Как я могу использовать Sqoop, чтобы объединить их в одну таблицу? Возможно, существуют дубликаты записей в ...
вопрос задан: 13 July 2018 11:52
0
ответов

Можно ли читать данные MongoDB, обрабатывать их с помощью Hadoop и выводить в RDBS (MySQL)?

Резюме: Можно ли: Импортировать данные в Hadoop с помощью «Коннектора MongoDB для Hadoop». Обработайте его с помощью Hadoop MapReduce. Экспортируйте его с помощью Sqoop за одну транзакцию. Я ...
вопрос задан: 24 December 2015 22:12
0
ответов

Как использовать сгенерированный класс sqoop в MapReduce?

Запрос sqoop генерирует файл Java, содержащий класс, содержащий код для получения доступа в mapreduce к данным столбцов для каждой строки. (импорт Sqoop был выполнен в тексте без --как -...
вопрос задан: 19 July 2012 16:20
0
ответов

Как использовать автоинкремент-ID при экспорте в Sqoop

У меня есть текстовый файл-, разделенный табуляцией, в HDFS, и я хочу экспортировать его в таблицу MySQL. Поскольку строки в текстовом файле не имеют числовых идентификаторов, как мне автоматически экспортировать в таблицу с идентификатором...
вопрос задан: 11 April 2012 13:45
0
ответов

Как использовать Sqoop в программе Java?

Я знаю, как использовать sqoop через командную строку. Но не знаю, как вызвать команду sqoop с помощью Java-программ. Может ли кто-нибудь дать представление о коде?
вопрос задан: 10 February 2012 14:50
0
ответов

Отображение неправильного числа после импорта таблицы в Hive

Я импортировал около 10 таблиц в Hive из MS SQL Server. Но когда я пытаюсь перепроверить записи в Hive в одной из таблиц, я обнаружил больше записей при запуске запроса (select count (*) ...
вопрос задан: 8 February 2012 16:05
0
ответов

Импорт данных из HDFS в HBase (cdh3u2)

Я установил hadoop и hbase cdh3u2. В hadoop у меня есть файл по пути /home/file.txt. у него есть данные как один, 1 два, 2 three, 3 Я хочу импортировать этот файл в hbase. в этом, первое поле ...
вопрос задан: 27 December 2011 14:20