Hadoop на Windows Server

15
задан Anony-Mousse 11 January 2012 в 07:34
поделиться

3 ответа

От документация Hadoop :

Win32 поддерживается как платформа разработки . Распределенная операция не была хорошо протестирована на Win32, таким образом, это не поддерживается как производственная платформа .

то, Которое я думаю, переводит в: "Вы самостоятельно".

Тем не менее могла бы быть надежда, если Вы не тошнотворны об установке Cygwin и контейнера Java, согласно страница Getting Started Hadoop wiki:

также возможно работать, демоны Hadoop как Windows Services с помощью Сервисной Обертки Java (загрузите это отдельно). Это все еще требует, чтобы Cygwin был установлен, как Hadoop требует своей команды df.

я предполагаю, что нижняя строка - то, что это не звучит невозможным, но Вы плавали бы в восходящем направлении полностью. Я сделал несколько установок Hadoop (на Linux для производства, Mac для dev) теперь, и я не обеспокоился бы Windows, когда это таким образом просто на других платформах.

9
ответ дан 1 December 2019 в 03:43
поделиться

While not the answer you may want to hear, I would highly recommend repurposing the machines as, say, Linux servers, and running Hadoop there. You will benefit from tutorials and experience and testing performed on that platform, and spend your time solving business problems rather than operational issues.

However, you can still write your jobs in C#. Since Hadoop supports the "streaming" implementation, you can write your jobs in any language. With the Mono framework, you should be able to take pretty much any .NET code written on the Windows platform and just run the same binary on Linux.

You can also access HDFS from Windows fairly easily -- while I don't recommend running the Hadoop services on Windows, you can certainly run the DFS client from the Windows platform to copy files in and out of the distributed file system.

For submitting and monitoring jobs, I think that you're mainly on your own... I don't think that there are any good general-purpose systems developed for Hadoop job management yet.

9
ответ дан 1 December 2019 в 03:43
поделиться

If you're looking for map/reduce, you can try looking at MySpace's new map/reduce framework that runs on windows http://qizmt.myspace.com/

2
ответ дан 1 December 2019 в 03:43
поделиться
Другие вопросы по тегам:

Похожие вопросы: