Как скопировать файлы из S3 в Amazon EMR HDFS?

Я запускаю hive через EMR, и мне нужно скопировать некоторые файлы во все экземпляры EMR.

Один из способов, насколько я понимаю, - это просто скопировать файлы в локальную файловую систему на каждом узле, другой - скопировать файлы в HDFS, однако я не нашел простого способа скопировать прямо из S3 в HDFS.

Как лучше всего это сделать?

26
задан jldupont 3 September 2012 в 17:11
поделиться