3
ответа
Spark2-Submit с пряжей, ClassNotFoundException [duplicate]
Я пытаюсь запустить работу spark2-submit в hdfs, за исключением того, что он продолжает предоставлять ошибку java.lang.ClassNotFoundException: ca.Main at java.net.URLClassLoader.findClass (URLClassLoader.java:381) ...
вопрос задан: 13 August 2015 08:56
1
ответ
Задание Spark не работает, когда JAR находится в HDFS
Я пытаюсь запустить искровое задание в автономном режиме, но команда не получает файл JAR из HDFS. JAR присутствует в папке HDFS, и он работает нормально, когда я запускаю его в локальном режиме. Ниже ...
вопрос задан: 19 January 2019 12:03
1
ответ
Отладка Pyspark в кластере [дубликат]
Если задания pyspark терпят неудачу в кластере, как отлаживать? Должны ли мы перезапустить весь процесс приложения с самого начала или его можно перезапустить с неудачного шага?
вопрос задан: 21 August 2015 14:29
0
ответов
Не удалось запустить задание Spark2 Scala на Cloudera [5.15.0], работающем на AWS EC2
У меня есть простой Scala-код Spark, который я пытаюсь запустить на spark2 в Cloudera [5.15.0], работающем на AWS EC2. Я создал этот проект в [Scala IDE] на компьютере Mac. 1 [] 2 Я использую чистый пакет ...
вопрос задан: 16 January 2019 21:54
0
ответов
Добавить баночки в Spark Job - spark-submit
Правда ... это обсуждалось довольно много. Однако есть много двусмысленности и некоторые ответы предоставлены ... включая дублирование ссылок на jar в конфигурации jars / executor / driver или ...
вопрос задан: 1 January 2018 05:59