блокировать роботов Google для URL-адресов, содержащих определенное слово

у моего клиента есть загрузка страниц, которые он не хочет индексировать в Google - все они называются

http://example.com/page-xxx

, поэтому они / page-123 или / page-2 или / page-25 и т. Д.

Есть ли способ остановить индексирование Google любой страницы, которая начинается с / page-xxx с использованием robots.txt

может что-то подобное сработать?

Disallow: /page-*

Спасибо

6
задан JorgeLuisBorges 27 October 2017 в 16:19
поделиться