Какой самый простой способ объединить небольшие блоки HDFS?

Я собираю логи с помощью Flume в HDFS. Для тестового примера у меня есть небольшие файлы (~ 300 КБ), потому что процесс сбора журналов был масштабирован для реального использования.

Есть ли какой-нибудь простой способ объединить эти небольшие файлы в более крупные, которые ближе к размеру блока HDFS (64 МБ )?

6
задан KARASZI István 13 December 2010 в 14:08
поделиться