5
ответов

Регулярное выражение для извлечения текста между квадратными скобками

Простой regex вопрос. У меня есть строка на следующем формате: это - [демонстрационная] строка с [немного] специальные слова. [другой], Что регулярное выражение состоит в том, чтобы извлечь слова в...
вопрос задан: 8 March 2010 07:20
2
ответа

Ошибка запуска Pyspark - Ошибка hive.HiveSessionState [duplicate]

Я установил Spark 2.1 с Cloudera. Когда я запускаю искровую оболочку из / usr / bin / spark2-shell, она запускается (с scala). Когда я запускаю Pyspark, я получаю эту проблему sudo -u hdfs ./pyspark2. Я получаю: ...
вопрос задан: 29 March 2016 16:38
1
ответ

Сертификация HortonWorks или Cloudera [закрыто]

Компании Hortonworks и Cloudera теперь объединены, поэтому какую сертификацию лучше пройти? Пожалуйста, поделитесь своими мыслями об этом.
вопрос задан: 11 March 2019 20:40
0
ответов

Не удалось запустить задание Spark2 Scala на Cloudera [5.15.0], работающем на AWS EC2

У меня есть простой Scala-код Spark, который я пытаюсь запустить на spark2 в Cloudera [5.15.0], работающем на AWS EC2. Я создал этот проект в [Scala IDE] на компьютере Mac. 1 [] 2 Я использую чистый пакет ...
вопрос задан: 16 January 2019 21:54
0
ответов

Как я могу подключить Hive Metastore с помощью Kerberos и SSL?

Я подключаюсь к Hive Metastore с аутентификацией Kerberos. Я попробовал несколько конфигураций, и мое текущее исключение - это. java.lang.IllegalArgumentException: java.net.UnknownHostException: & ...
вопрос задан: 16 January 2019 10:05
0
ответов

Setting Как настроить аутентификацию Cloudera Manager 6 с Active Directory

Я очень неопытный Аутентификация Cloudera Manager 6. Я хотел бы настроить аутентификацию Cloudera manager 6 с Active Directory, выполнив следующие действия, но она не работает. https: // ...
вопрос задан: 31 December 2018 08:37
0
ответов

В менеджере ресурсов кластера менеджера клаудера постоянно работает .. есть ли какое-либо решение для этого

Я пытаюсь решить проблему для менеджера ресурсов в пряже Cloudera, чтобы активно, но она часто падает
вопрос задан: 13 July 2018 05:50
0
ответов

Создание Hadoop с помощью Eclipse/Maven — Отсутствует артефакт jdk.tools:jdk.tools:jar:1.6

Я пытаюсь импортировать org.apache.hadoop:hadoop-client:2.0.0-cdh4.0.0 из Cloudera cdh4 maven repo в проекте maven в eclipse 3.81, плагин m2e, с jdk 1.7.0_05 оракула на win7 с использованием <...
вопрос задан: 24 August 2017 07:37
0
ответов

Ошибка HBase - отказ от назначения -ROOT-

Я только что установил hadoop и hbase из cloudera (3), но когда я пытаюсь перейти на http: // localhost: 60010, он просто сидит там непрерывно загружается. Я могу легко добраться до регионального сервера - http: // localhost: ...
вопрос задан: 10 June 2017 08:18
0
ответов

Cloudera Parcel: Stoprunner не выполняется

Я создал пакет и csd, которые идут вместе и отлично работают при развертывании в кластер. Однако, когда я останавливаю службу, дочерний процесс, запускаемый сценарием запуска, продолжает работать в ...
вопрос задан: 26 February 2015 10:24
0
ответов

Найти номер порта, где HDFS слушает

Я хочу получить доступ к hdfs с полностью определенными именами, такими как: hadoop fs -ls hdfs: // machine-name: 8020 / user. Я также могу просто получить доступ к hdfs с помощью hadoop fs -ls / user. Однако я пишу тестовые примеры ...
вопрос задан: 6 October 2014 13:05
0
ответов

Поиск в документах, хранящихся в Hadoop -Какой инструмент использовать?

Я потерялся в :Hadoop, Hbase, Lucene, Carrot2, Cloudera, Tika, ZooKeeper, Solr, Katta, Cascading, POI... Когда вы читаете об одном, вы часто можете быть уверены, что каждый из других инструментов будет...
вопрос задан: 18 July 2012 18:53
0
ответов

В Hadoop где фреймворк сохраняет вывод задачи Map в обычном Map-Reduce приложении?

Я пытаюсь выяснить, где сохраняется вывод задачи Map на диск, прежде чем он может быть использован задачей Reduce. Примечание: - используется версия Hadoop 0.20.204 с новым API Например, когда ...
вопрос задан: 2 July 2012 17:01
0
ответов

Восстановить таблицу HBase (неназначенный регион в процессе перехода)

Я немного застрял при восстановлении неисправной таблицы (на Hbase 0.92.1-cdh4.0.0, Hadoop 2.0.0 -cdh4.0.0) Существует незаконченный переходный регион: Состояние региона bf2025f4bc154914b5942af4e72ea063 ...
вопрос задан: 13 June 2012 07:35
0
ответов

Как планировать задачи Hadoop Map в многоядерном -8 узле кластер?

У меня есть программа "только карта" (без фазы сокращения ). Размер входного файла достаточно велик для создания 7 картографических задач, и я убедился, что, просмотрев выходные данные, мы получили от (часть -000 до части 006 ). Итак, мой...
вопрос задан: 29 April 2012 15:47
0
ответов

Как запустить оболочку HBase на удаленном кластере

Я запускаю HBase в псевдораспределенном режиме на своей рабочей станции. У нас также есть HBase, работающий в кластере. Используя оболочку HBase, я хочу получить доступ к экземпляру HBase, работающему в кластере...
вопрос задан: 18 April 2012 23:24
0
ответов

Как разрешить «файл может быть реплицирован только на 0 узлов вместо 1» в Hadoop?

У меня есть простая задача Hadoop, которая сканирует веб-сайты и кэширует их в HDFS. Mapper проверяет, существует ли уже URL-адрес в HDFS, и если да, использует его, в противном случае загружает страницу и сохраняет ее в ...
вопрос задан: 3 April 2012 04:16
0
ответов

Cloudera Manager не может добавить хосты

Я выполнил процедуру установки отсюда, и когда я дойду до этапа Inspect Role Assignments, я вижу только один управляемый хост: localhost.localdomain. Любые последующие попытки добавить другие хосты ...
вопрос задан: 8 February 2012 13:50
0
ответов

Как установить Cloudera Hue на Mac OS X Lion?

Кто-нибудь пробовал это? Google показывает полную пустоту, и до сих пор это был трудный процесс (я новичок в создании, муравей и т. Д.). После скачивания множества зависимостей, некоторые откровенно неразумные ...
вопрос задан: 30 January 2012 00:56
0
ответов

Hadoop: Ошибка при настройке объекта

Я пытаюсь запустить тесты Terasort и получаю следующее исключение: java.lang.RuntimeException: ошибка при настройке объекта в org.apache.hadoop.util.ReflectionUtils .setJobConf (...
вопрос задан: 24 January 2012 00:06
0
ответов

Импорт данных из HDFS в HBase (cdh3u2)

Я установил hadoop и hbase cdh3u2. В hadoop у меня есть файл по пути /home/file.txt. у него есть данные как один, 1 два, 2 three, 3 Я хочу импортировать этот файл в hbase. в этом, первое поле ...
вопрос задан: 27 December 2011 14:20
0
ответов

Класс Hadoop JobConf устарел, требуется обновить пример

Я пишу программы hadoop, и я действительно не хочу играть с устаревшими классами. Нигде в Интернете я не могу найти программы с обновленным классом org.apache.hadoop.conf.Configuration ...
вопрос задан: 22 December 2011 12:21
0
ответов

Почему моя команда потоковой передачи не работает для базовой программы MapReduce?

Я пытался запустить программу потоковой передачи Ruby Hadoop, которая приведена в «Полном руководстве по Ruby». Я использовал эту команду: hadoop jar /usr/lib/hadoop-0.20/contrib/streaming/hadoop-streaming-0 ....
вопрос задан: 18 December 2011 08:20
0
ответов

Использование шифрования в Hadoop

В документации Cloudera говорится, что Hadoop не поддерживает шифрование на диске. Можно ли использовать в Hadoop жесткие диски с аппаратным шифрованием?
вопрос задан: 4 October 2011 15:01
0
ответов

Подключение и сохранение HBase

Я просто пытался подключиться к HBase, которая является частью Cloudera-VM с использованием клиента Java. (192.168.56.102 - IP-IP IP VM) Я использую виртуальную коробку с помощью сетевого параметра. Так что я могу получить доступ к ...
вопрос задан: 21 September 2011 14:41
0
ответов

Доступ к HBase работает в VM с клиентом на хост-системе

Я пытаюсь написать некоторые данные в HBASE с помощью клиентской программы HBASE @ Hadoop Runs в предварительном обороте VM от Cloudera @ Ubuntu. Клиент работает на системе, размещающей виртуальную машину и бегущий клиент напрямую ...
вопрос задан: 7 September 2011 16:38
0
ответов

Hadoop: ошибка промежуточного слияния

У меня возникла странная проблема. Когда я запускаю свое задание Hadoop с большим набором данных (> 1 ТБ сжатых текстовых файлов), некоторые из задач сокращения завершаются сбоем с такими трассировками стека: java.io.IOException: Task: ...
вопрос задан: 8 April 2011 18:14