Получение списка каталогов по http

Есть каталог, обслуживаемый по сети, за которым я заинтересован. Его содержимое представляет собой различные версии программного обеспечения, которое я использую, и я хотел бы написать сценарий, который я мог бы запустить, который проверяет, что там есть, и загружает все, что новее, чем то, что у меня уже есть.

Есть ли способ, скажем, с помощью wget или чего-то еще, чтобы получить список каталогов. Я пробовал использовать wget в каталоге, который дает мне html. Чтобы избежать синтаксического анализа html-документа, есть ли способ получить простой список вроде ls ?