2
ответа

Найти трассировку стека для задания рабочего процесса, запущенного из координатора Oozie

У меня есть простой координатор Oozie с этой спецификацией: < имя-координатора-приложения = "my-координата" частота = "$ {ordin: days (1)}" start = "$ {startDate}" end = "$ { endDate} "timezone =" UTC "...
вопрос задан: 16 January 2019 14:28
1
ответ

Действие Oozie Spark (Содержит HiveContext) Предоставление java.lang.OutOfMemoryError: PermGen space

Я пытаюсь запустить автономное приложение Spark-Scala в Oozie. Обратите внимание, что я использую CDH5.13 Quickstart VM с 20 ГБ ОЗУ (содержит Cloudera Manager, HUE ... и я обновил Java с 7 до 8). ...
вопрос задан: 23 January 2019 20:22
1
ответ

Передайте необязательное свойство из основного рабочего процесса oozie в subworkflow

У меня есть HDFS_file_path или свойство, которое необходимо передать из workflow-1 в common_subworkflow. У меня также есть workflow-2, который не имеет этого свойства или HDFS_file_path. Но workflow-2 вызывает ...
вопрос задан: 13 July 2018 20:24
0
ответов

Может ли SparkSubmit переопределить системное свойство oozie.action.output.properties?

Среда: Oozie 4.2 Hadoop 2.7 Я предполагаю, что конфигурация Oozie содержит свойства, загруженные на сервер Oozie при запуске. Если это так, то все еще возможно для рабочего процесса ...
вопрос задан: 18 January 2019 04:30
0
ответов

Как включить аутентификацию LDAP на Apigee Oozie

Я установил Apache Hadoop и запускаю задания Spark с использованием Yarn. Сейчас я настраиваю рабочий процесс и планирую свои задания Spark с помощью Apache Oozie. Могут ли некоторые рассказать мне о том, как настроить и включить LDAP ...
вопрос задан: 18 January 2019 02:31
0
ответов

Неизвестное исключение хоста с HA пряжей

Я получаю неизвестное исключение для хоста, службы имен правильно поддерживаются в hdfs-site.xml и core-site.xml. 019-01-14 03: 46: 48,564 FATAL [main] org.apache.hadoop.mapreduce.v2.app ....
вопрос задан: 16 January 2019 14:51
0
ответов

Рабочий поток свиньи в Хадооп 2.2 Свинья 0,12,1 в 4.1.0

Я пытаюсь выполнить рабочий процесс свиньи. Но рабочий процесс зависает в рабочем состоянии, я проверил файл журнала, я нашел этот файл журнала от менеджера узлов: 2015-02-25 17: 50: 06,322 [JobControl] INFO ...
вопрос задан: 25 February 2015 17:29
0
ответов

Как oozie обрабатывает зависимости?

У меня есть несколько вопросов об общих библиотеках oozie 2.3: В настоящее время я определил общие библиотеки в нашем координаторе.properties: oozie.use.system.libpath=true oozie.libpath= ...
вопрос задан: 14 January 2014 06:42
0
ответов

Как правильно использовать oozie для записи в несколько выходных потоков для задания mapreduce?

Я использую новый API Hadoop для написания последовательности заданий по уменьшению карты. Я планирую использовать Oozie для конвейера всего этого вместе, но я не могу найти способ сделать несколько выходных потоков с карты-...
вопрос задан: 4 April 2013 11:48
0
ответов

Сравнение инструментов рабочего процесса :Oozie и каскадирование

Я ищу инструмент рабочего процесса для запуска сложной карты -сокращения рабочих мест. Я имею в виду Oozie, но также хочу изучить Cascading. Есть ли какой-нибудь пример кода или пример, который связывает существующие задания M/R, используя...
вопрос задан: 3 July 2012 18:36