0
ответов
Смена пользователя в python
Я написание простого скрипта, который перезапускает подчиненное устройство hadoop. В сценарии я должен внести некоторые начальные изменения как пользователь root. После этого мне нужно перейти на пользователя hadoop и выполнить набор команд. Я ...
вопрос задан: 6 November 2011 04:56
0
ответов
Hadoop Hello World: пример и введение [закрыто]
Я много слышал об Apache Hadoop как об отличном способе выполнения интенсивных операций. Ищете действительно базовое введение в Hadoop. Как эквивалент helloworld, а затем, возможно, ...
вопрос задан: 4 November 2011 02:32
0
ответов
Как настроить класс с возможностью записи в Hadoop?
Я пытаюсь реализовать класс с возможностью записи, но понятия не имею, как реализовать класс с возможностью записи, если в моем классе есть вложенный объект, например список и т. Д. Может ли кто-нибудь мне помочь? спасибо общественный класс ...
вопрос задан: 3 November 2011 13:52
0
ответов
Что означают исключения EOF в соединениях с именами узлов hadoop из hbase / filesystem?
Это как общий вопрос об исключениях Java EOF, так и об исключении EOF Hadoop, которое связано с совместимостью jar. Комментарии и ответы по любой теме приемлемы. ...
вопрос задан: 31 October 2011 01:14
0
ответов
Custom partitioner example
Я пытаюсь написать новое задание Hadoop для входных данных, которые несколько перекошены. Аналогией для этого может быть пример подсчета слов в учебнике по Hadoop, за исключением того, что, скажем, одно конкретное слово присутствует много ...
вопрос задан: 24 October 2011 23:44
0
ответов
Промежуточный вывод Hadoop MapReduce
Есть ли способ вывода в журнал промежуточных (этап отображения) вывода задания MapReduce без редактирования приложения? (Приложение не мое, но кластер есть, и я могу настроить Hadoop ...
вопрос задан: 23 October 2011 16:54
0
ответов
Как заставить Hadoop находить импортированные модули Python при использовании UDF Python в Pig?
Я использую Pig (0.9.1) с UDF, написанными на Python. Скрипты Python импортируют модули из стандартной библиотеки Python. Мне удалось запустить сценарии Pig, которые успешно вызывают UDF Python, в ...
вопрос задан: 20 October 2011 05:47
0
ответов
Разница между hadoop fs -put и hadoop fs -copyFromLocal
-put и -copyFromLocal задокументированы как идентичные, в то время как в большинстве примеров используется подробный вариант -copyFromLocal. Почему? То же самое для -get и -copyToLocal
вопрос задан: 18 October 2011 06:29
0
ответов
Hadoop & Bash: удалить диапазон совпадения имен файлов
Допустим, у вас есть список файлов в HDFS с общим префиксом и увеличивающимся суффиксом. Например, part-1.gz, part-2.gz, part-3.gz, ..., part-50.gz Я хочу оставить только несколько файлов в каталоге, ...
вопрос задан: 11 October 2011 23:04
0
ответов
Hadoop - увеличение количества задач карты в xml не увеличивает количество задач карты при запуске
Я добавил следующее в свой conf / mapred-site.xml mapred.tasktracker.map.tasks.maximum < / name> 4
...
вопрос задан: 7 October 2011 23:30
0
ответов
HBase получает все значения с метками времени для ячейки
у меня есть следующий сценарий в моем экземпляре hbase hbase (main): 002: 0> create 'test', 'cf'
0 строк за 1,4690 секунды hbase (main): 003: 0> put ' test ',' row1 ',' cf: a ',' value1 '
0 строк в 0.1480 ...
вопрос задан: 7 October 2011 00:21
0
ответов
как написать подзапрос и использовать предложение «In» в Hive
Как я могу использовать предложение In в Hive Я хочу написать что-то подобное в Hive выберите x из y, где yz в порядке (выберите отдельный z из y) by x;
Но я не могу это сделать ..
Я пробовал In ...
вопрос задан: 6 October 2011 16:16
0
ответов
Как удалить Hadoop?
Я использую Mac OSX и хочу удалить/переустановить (очистить) hadoop Пожалуйста, дайте мне знать, как я могу это сделать Спасибо
вопрос задан: 5 October 2011 22:29
0
ответов
Использование шифрования в Hadoop
В документации Cloudera говорится, что Hadoop не поддерживает шифрование на диске. Можно ли использовать в Hadoop жесткие диски с аппаратным шифрованием?
вопрос задан: 4 October 2011 15:01
0
ответов
iPhone UDP вещание и ответ
Мне нужно отправить UDP вещание с iPhone, а затем прослушать ответ UDP с периодом тайм-аута. Я нашел пример Apple UDPEcho, но я не уверен, что это то, что мне нужно. Также найден...
вопрос задан: 3 October 2011 03:25
0
ответов
Как установить текущую дату и время с помощью подготовленного оператора?
В базе данных есть столбец с типом данных DATETIME. Я хочу установить это значение столбца в текущую дату и время, используя 'PreparedStatement. Как это сделать?
вопрос задан: 2 October 2011 12:13
0
ответов
Hadoop, альтернатива обработки в реальном времени Mahout
Я намеревался использовать hadoop в качестве «вычислительного кластера» в моем проекте. Однако затем я прочитал, что Hadoop не предназначен для систем реального времени из-за накладных расходов, связанных с запуском задания. Я ищу ...
вопрос задан: 1 October 2011 10:21
0
ответов
Преобразовать DataInput в DataInputStream?
Как преобразовать DataInput в DataInputStream в java? Мне нужно узнать размер DataInput.
вопрос задан: 27 September 2011 23:53
0
ответов
LeaseExpiredException: нет ошибки аренды на HDFS
Я пытаюсь загрузить большие данные в HDFS, и иногда я получаю сообщение об ошибке ниже. есть идеи почему? Ошибка: org.apache.hadoop.ipc.RemoteException: org.apache.hadoop.hdfs.server.namenode ....
вопрос задан: 26 September 2011 18:55
0
ответов
Разница между String.getBytes () и Bytes.toBytes (строковые данные)
Я пишу задание Hadoop / HBase. Мне нужно было преобразовать строку Java в массив байтов. Есть ли какие-либо различия между Java String.getBytes () и Hadoop Bytes.toBytes ()?
вопрос задан: 26 September 2011 11:50
0
ответов
Присоединение к COGROUP в PIG
Есть ли какие-либо преимущества (по сравнению с производительностью / уменьшением количества карт), когда я использую COGROUP вместо JOIN в PIG? http://developer.yahoo.com/hadoop/tutorial/module6.html рассказывает о разнице в ...
вопрос задан: 21 September 2011 07:23
0
ответов
Параллельное выполнение заданий в hadoop
Я новичок в hadoop. Я установил кластер из 2 узлов. Как запустить 2 задания параллельно в hadoop. Когда я отправляю задания, они запускаются одно за другим в порядке FIFO. Я должен выполнять задания параллельно. Как ...
вопрос задан: 20 September 2011 10:22
0
ответов
Как установить количество задач карты в хадупе 0.20?
Я пытаюсь установить количество задач карты для запуска в хадупе 0.20. Я использую старый апи. Вот опции, которые я пробовал до сих пор: conf.set("mapred.tasktracker.map.tasks.max", "5")....
вопрос задан: 19 September 2011 21:48
0
ответов
Работа Hadoop просит отключить безопасный узел
Работа Hadoop просит отключить Безопасный режим вручную. Он говорит, что ресурсы недоступны. Как отключить безопасный режим?
вопрос задан: 19 September 2011 14:23
0
ответов
Как Hive решает, когда использовать карту уменьшать, а когда нет?
В качестве простого примера, выберите * из таблички; НЕ БЫВАЙТЕ лягнуть в карту уменьшать, а выберите счет(*) из таблички; DOES. Какой общий принцип используется для принятия решения о том, когда использовать сокращение карты (по ульям)?....
вопрос задан: 19 September 2011 04:27
0
ответов
HDFS шифрует или сжимает данные во время хранения?
, когда я помещаю файл в HDFS, например, $. /BIN/HADOOP /DFS -PUT / POSTE / FILE введите файл, сжатый во время хранения?
Файл зашифрован во время хранения? Есть ли настройка конфигурации, которую мы можем ...
вопрос задан: 19 September 2011 04:02
0
ответов
Почему мы должны явно устанавливать клавишу выходной клавиши / значение Value в программе Hadoop?
в книге «Hadoop: Окончательный руководстве», есть образец программы с указанным ниже кодом. Jobconf conf = new jobconf (maxtemperature.class); Cont.Setjobname («Максимальная температура»); FileInputformat ....
вопрос задан: 18 September 2011 17:53
0
ответов
Какова цель org.apache.hadoop.mapreduce.mapper.run () Функция в Hadoop?
Какова цель org.apache.hadoop.mapreduce.mapper.run () Функция в Hadoop? Настройка () вызывается перед вызовом карты (), а чистое () вызывается после карты (). Документация для ...
вопрос задан: 18 September 2011 06:03
0
ответов
Получить имя входного файла в потоковой программе Hadoop
Я могу найти имя, если входной файл в классе Mapper использует FilesPlit при написании программы в Java. Есть ли соответствующий способ сделать это, когда я пишу программу в Python (используя ...
вопрос задан: 16 September 2011 19:59
0
ответов
Haskell не смог найти модуль `System '
Я новый с HASKELL и иметь проблемы с его пакетом. Я хочу импортировать System.random, но не смог найти модуль «System.random», то я пытался импортировать систему, но не смог найти модуль «Система» ...
вопрос задан: 15 September 2011 16:24