Код Ruby для проверки того, есть ли на веб-сайте дружественные для поисковых систем URL-адреса

Я разрабатываю приложение на рельсах, которое требует проверки того, имеет ли введенный веб-сайт сгенерированные URL-адреса, удобные для поисковых систем, или нет. Решение, которое я имею в виду, использует nokogiri для анализа HTML-сайта и просмотра тега ссылки для поиска URL-адресов и посмотрите, дружелюбны ли они к поисковой системе. Есть ли другой способ сделать это? Любая помощь будет действительно здоровой.