0
ответов

Как проверить равенство с помощью Spark Dataframe без SQL-запросов?

Я хочу выбрать столбец, который соответствует определенному значению. Я делаю это в Скала и у меня есть небольшие проблемы. Вот мой код df.select (df ("state") === "TX"). Show () это возвращает столбец состояния с ...
вопрос задан: 9 July 2015 17:43
0
ответов

Как добавить любую новую библиотеку, такую ​​как spark-csv, в готовую версию Apache Spark

Я собрал Spark-csv и могу использовать его из оболочки pyspark с помощью следующей команды bin / spark-shell --packages com.databricks: spark-csv_2.10: 1.0.3 ошибка получения > > > df_cat ....
вопрос задан: 10 June 2015 18:31