tl; dr Вы бы предпочли не.
Ну, возможно, возможно , но, учитывая, что вы только что отправились на Землю Искры, усилия не будут платить off.
Windows никогда не была подходящей для разработчиков ОС, и всякий раз, когда я учу людей Spark, и они используют Windows, я просто считаю, что нам нужно пройти через winutils.exe
, но много раз также, как работать в командной строке.
Пожалуйста, установите winutils.exe
следующим образом:
cmd
в качестве администратора c:\hadoop\bin
bin
), например. set HADOOP_HOME=c:\hadoop
%HADOOP_HOME%\bin
c:\tmp\hive
winutils.exe chmod -R 777 \tmp\hive
spark-shell
и запустите spark.range(1).show
, чтобы увидеть однострочный набор данных.