Robots.txt, как разрешить доступ только к корню домена, и не глубже? [закрыто]

Закрыто. Этот вопрос не по теме . В настоящее время он не принимает ответы.

Хотите улучшить этот вопрос? Обновите вопрос , чтобы он был по теме для Stack Overflow.

Закрыт 7 лет назад .

Я хочу разрешить поисковым роботам доступ к корневому каталогу моего домена (то есть к файлу index.html), но ничего более глубокого (т.е. без подкаталогов). Я не хочу перечислять и запрещать каждый подкаталог отдельно в файле robots.txt. В настоящее время у меня есть следующее, но я думаю, что он все блокирует, включая содержимое корневого каталога домена.

User-agent: *
Allow: /$
Disallow: /

Как я могу написать свой файл robots.txt, чтобы выполнить то, что я пытаюсь сделать?

Заранее спасибо!

robots.txt

задан WASa2 5 March 2011 в 20:32

0 ответов

Другие вопросы по тегам:

robots.txt

Robots.txt, как разрешить доступ только к корню домена, и не глубже? [закрыто]

0 ответов

Похожие вопросы: