Почему завихрение в Ruby медленнее, чем завихрение командной строки?

Я пытаюсь загрузить страницы больше чем на 1 м (URL, заканчивающиеся идентификатором последовательности). Я реализовал вид многоцелевого менеджера загрузок с настраиваемым количеством потоков загрузки и одного потока обработки. Загрузчик загружает файлы в пакетах:

curl = Curl::Easy.new

batch_urls.each { |url_info|
    curl.url = url_info[:url]
    curl.perform
    file = File.new(url_info[:file], "wb")
    file << curl.body_str
    file.close
    # ... some other stuff
}

Я попытался загрузить образец на 8 000 страниц. При использовании кода выше, я добираюсь 1000 за 2 минуты. Когда я пишу все URL в файл и делаю в оболочке:

cat list | xargs curl

Я генерал все 8 000 страниц за две минуты.

Вещь, мне нужна она, чтобы иметь ее в коде Ruby, потому что существует другой контроль и код обработки.

Я попробовал:

• Завихрение:: Много - это так или иначе быстрее, но отсутствует, 50-90% файлов (не загружает их и не приводит причины),
• несколько потоков с Завихрением:: Легкий - вокруг той же скорости как единственная распараллелил

Почему снова используется Завихрение:: Легкий медленнее, чем последующая командная строка завихряются вызовы и как я могу сделать ее быстрее? Или что я делаю неправильно?

Я предпочел бы исправлять свой код менеджера загрузок, чем сделать загрузку для этого случая по-другому.

Перед этим я называл командную строку wget, которому я предоставил файл со списком URL. Howerver, не все ошибки были обработаны, также не было возможно указать выходной файл для каждого URL отдельно при использовании списка URL.

Теперь мне кажется, что лучший способ состоял бы в том, чтобы использовать несколько потоков с системным вызовом для 'завихрений' команды. Но почему, когда я могу использовать непосредственно Вихревой в Ruby?

Код для менеджера загрузок здесь, если он мог бы помочь: Менеджер загрузок (я играл с тайм-аутами от не установленного это к различным значениям, это не казалось справкой),

Любые подсказки ценятся.