0
ответов

Как узнать версии Hive и Hadoop из командной строки?

Как узнать, какую версию Hive я использую, из командной строки. Ниже приведены подробности -. Я использую Putty для подключения к таблице hive и доступа к записям в таблицах. Итак, что я сделал, так это -я открыл...
вопрос задан: 10 April 2016 19:11
0
ответов

Удаление нескольких таблиц с одинаковым префиксом в Hive

У меня есть несколько таблиц в кусте с таким же префиксом, как показано ниже .. temp_table_name temp_table_add temp_table_area В моей базе данных есть несколько сотен таких таблиц, как и многие другие таблицы. Я ...
вопрос задан: 9 March 2016 20:28
0
ответов

Что такое Hive :Код возврата 2 из org.apache.hadoop.hive.ql.exec.MapRedTask

Я получаю :FAILED :Execution Error, код возврата 2 от org.apache.hadoop.hive.ql.exec.MapRedTask При попытке сделать копию секционированной таблицы с помощью команд в консоли куста :СОЗДАТЬ...
вопрос задан: 6 September 2015 22:28
0
ответов

Как куст может загружать данные из CSV?

Я хочу реализовать Apache Hive, и я хочу загрузить данные из CSV-файла в таблицу Hive. Итак, вот проблема: мой CSV-файл, сгенерированный SQL Server в своей структуре, имеет знак ", и он стал ...
вопрос задан: 26 February 2015 07:38
0
ответов

Относительно хранения таблиц HIVE

Может кто-нибудь, пожалуйста, помогите мне понять нижеследующий пункт. Я создал одну таблицу HIVE, которая не является таблицей разделов, но я работаю в кластере из 10 узлов, поэтому в этом случае будут данные этого ...
вопрос задан: 26 February 2015 06:59
0
ответов

Чтение секционированного файла паркета в Spark приводит к полям в неправильном порядке

Для таблицы с созданием таблицы mytable (..), разделенной на (my_part_column String) Мы выполняем hive sql следующим образом: из pyspark.sql import HiveContext hc = HiveContext (sc) ...
вопрос задан: 26 February 2015 05:18
0
ответов

Hbase или hdfs, которые будут лучше

У меня есть сценарий использования, в котором у нас есть большой объем данных, по которым необходимо выполнить аналитику. Данные будут непрерывно выбираться и анализироваться для выполнения во время выполнения. Для этого варианта использования ...
вопрос задан: 25 February 2015 14:28
0
ответов

PostgreSQL / Hive объединяет несколько таблиц

Таблица a: значение id0 101 a1 102 a2 103 a3 Таблица b: значение id1 101 b1 101 b2 101 b3 Таблица c: значение id2 101 c1 103 c3 103 c4 ...
вопрос задан: 25 February 2015 14:18
0
ответов

Отчетность в определенном столбце в улье

Я бегаю 071 У меня есть стол, с Mulitple Rows, с тем же значением столбца например х |. y |. ---------- 1 |. 2 |. 1 |. 3 |. 1 |. 4 |. 2 |. 2 |. 3 |. 2 |. 3 |. 1 |. Я хочу иметь уникальный столбец X, ...
вопрос задан: 9 September 2014 07:56
0
ответов

Загрузка данных из одной таблицы Hive в другую с разделом

У меня есть данные в одной таблице Hive, и я хотел бы загрузить данные в другую таблицу Hive. Исходной таблицей является reg_logs, которая имеет 2 раздела, дату и час. Данные загружаются в эту таблицу каждый час. ...
вопрос задан: 13 June 2014 18:05
0
ответов

Искра в бизнес-аналитике

В настоящее время я занимаюсь проектом в области бизнес-аналитики и больших данных, в двух областях, в котором я, честно говоря, новичок и очень экологичен. Я планировал построить Hive Datawarehouse, используя MongoDB и ...
вопрос задан: 6 June 2014 13:02
0
ответов

столбец раздела в кусте

Мне нужно разделить таблицу в кусте с помощью столбца, который также является частью таблицы. Например: Таблица: Сотрудник Столбцы: employeeId, employeeName, employeeSalary Мне нужно разделить таблицу с помощью ...
вопрос задан: 28 May 2014 06:18
0
ответов

Пользовательская программа сокращения карты в Hive, что за правило? Как насчет ввода и вывода?

Я застрял на несколько дней, потому что хочу создать собственную программу уменьшения карты на основе моего запроса в улье, я нашел не так много примеров после поиска в Google, и я все еще не понимаю правила. Что такое ...
вопрос задан: 25 May 2014 13:45
0
ответов

Клиент Perl Thrift для Hive?

Я хотел бы подключиться к хранилищу данных Hive на основе Hadoop с помощью Perl. Hive позволяет подключаться через интерфейс Thrift (http://wiki.apache.org/hadoop/Hive/HiveClient), и есть реализация Thrift ...
вопрос задан: 9 May 2014 11:18
0
ответов

Как сделать таблицу HIVE из данных JSON?

Я хочу создать таблицу Hive из некоторых данных JSON (, вложенных ), и выполнять к ней запросы? Это вообще возможно? Мне удалось загрузить файл JSON на S3 и запустить экземпляр EMR, но я не...
вопрос задан: 2 February 2014 22:19
0
ответов

Существует ли у Hive эквивалент SQL «не нравится»

Хотя Hive поддерживает положительные подобные запросы: например. выберите * from table_name, где column_name как 'root ~%'; Hive Не поддерживает отрицательные подобные запросы: напр. select * from table_name где ...
вопрос задан: 12 January 2014 16:16
0
ответов

Разделить таблицу Hive по существующему полю?

Могу ли я разделить таблицу Hive при вставке по существующему полю ? У меня есть файл размером 10 ГБ с полем даты и полем часа дня. Могу ли я загрузить этот файл в таблицу, а затем вставить-перезаписать в другой ...
вопрос задан: 29 October 2013 15:44
0
ответов

Cassandra wih Hive

Am new in cassandra and Hive. Now i want integrate cassandra with the Hadoop-Hive but how can i integrate the cassandra with Hive.
вопрос задан: 7 October 2013 11:26
0
ответов

Ошибка выполнения, код возврата 1 из org.apache.hadoop.hive.ql.exec.MapRedTask

Я столкнулся с проблемой при выполнении УСЛОВНЫХ ЗАПРОСОВ В HiveQL. Основной выбор * из оператора tablename работает нормально. Ошибка: Всего заданий MapReduce = 1 Запуск задания 1 из 1 Количество ...
вопрос задан: 30 September 2013 04:29
0
ответов

Обновление, параметр SET в Hive

Я знаю, что в Hadoop нет обновления файла, но в Hive можно с помощью синтаксического сахара объединить новые значения со старыми данными в таблице а затем переписать таблицу с объединенным выводом ...
вопрос задан: 31 July 2013 16:03
0
ответов

Как я могу получить исходные коды заданий MapReduce, сгенерированные компилятором Hive?

Я хотел бы знать, какой код генерирует компилятор SQL Hive (т.е. если я выполню одно предложение sql, я бы хотел чтобы увидеть код заданий MapReduce, сгенерированных компилятором куста SQL). Как я могу ...
вопрос задан: 10 July 2013 13:33
0
ответов

В чем разница между Apache Pig и Apache Hive?

В чем точная разница между свиньей и ульем? Я обнаружил, что оба имеют одинаковое функциональное значение, потому что они используются для выполнения одной и той же работы. Единственное, это реализация, которая отличается для...
вопрос задан: 18 March 2013 22:54
0
ответов

Вставка данных в таблицу Hive

Я новичок в hive. Я успешно настроил кластер Hadoop с одним узлом для целей разработки, а поверх него я установил hive и pig. Я создал фиктивную таблицу в hive: create table foo (...
вопрос задан: 4 March 2013 06:54
0
ответов

Как добавить номера строк для строк в PIG или HIVE?

У меня проблема при добавлении номеров строк с помощью Apache Pig. Проблема в том, что у меня есть столбец STR_ID, и я хочу добавить столбец ROW_NUM для данных в STR_ID, который является номером строки STR_ID. ...
вопрос задан: 7 January 2013 21:31
0
ответов

Как скопировать файлы из S3 в Amazon EMR HDFS?

Я использую куст поверх EMR, и мне нужно скопировать некоторые файлы во все экземпляры EMR. Один из способов, насколько я понимаю, - это просто скопировать файлы в локальную файловую систему на каждом узле, другой - скопировать файлы в ...
вопрос задан: 3 September 2012 17:11
0
ответов

как преобразовать строку времени эпохи unix в строку даты в улье

У меня есть файл журнала, который содержит столбец отметки времени. Метка времени находится в формате времени эпохи Unix. Я хочу создать раздел на основе метки времени с годом, месяцем и днем ​​разделов. На данный момент у меня есть ...
вопрос задан: 3 September 2012 15:35
0
ответов

Улей: добавление динамического раздела во внешнюю таблицу

Я использую куст 071, обрабатывающий существующие данные, которые имеют следующую структуру каталогов: - TableName - d = (например, 2011-08-01) - d = 2011-08-02 - d = 2011-08-03 ... и т. д. под каждой датой у меня есть дата ...
вопрос задан: 3 September 2012 15:33
0
ответов

Экспорт HIVE в CSV

У меня есть некоторые данные в HIVE, и я хотел бы видеть их в LibreOffice. Как мне экспортировать эти данные, а затем импортировать их в Libreoffice
вопрос задан: 16 August 2012 13:40
0
ответов

Получите sysdate -1 в Hive

Есть ли способ получить текущую дату -1 в Hive всегда означает вчерашнюю дату? И в этом формате -20120805? Я могу запустить свой запрос таким образом, чтобы получить данные для вчерашней даты, так как сегодня 6 августа -...
вопрос задан: 7 August 2012 02:28
0
ответов

Передача даты в качестве аргументов командной строки в Hive

У меня есть запрос ниже в файле test1.hql. Я пытаюсь передать дату (dt )в качестве аргумента командной строки. выберите *из губ _данные _качество, где dt = '${hiveconf :start _date}'; Поэтому всякий раз, когда я пытаюсь бежать...
вопрос задан: 4 August 2012 18:48