Существует ли способ заставить роботы проигнорировать определенный текст?
У меня есть свой блог (Вы видите его, если Вы хотите от моего профиля), и это ново, а также роботы Google, анализирующие результаты.
Результаты вызывали тревогу мне. По-видимому, наиболее распространенные 2 слова на моем сайте являются "RSS" и "каналом", потому что я использую текст для ссылок как "Комментарии RSS", "Канал Сообщения", и т.д. Эти 2 слова будут присутствовать в каждом сообщении, в то время как другие слова будут более редкими.
Существует ли способ заставить эти ссылки исчезнуть из парсинга Google? Я не хочу технические индексируемые ссылки. Я только хочу, чтобы содержание, заголовки, описания были индексированы. Я ищу что-то другое, чем замена этого текста с изображениями.
Я нашел некоторые старые обсуждения Google, назад с 2007 (я думаю за 3 года, которые много вещей, возможно, изменили, надо надеяться, это также),
Этот вопрос не о robots.txt и как заставить Google проигнорировать страницы. Это о том, чтобы заставлять это проигнорировать мелкие детали страницы или преобразование частей таким способом, которым это будет замечено людьми и невидимое для роботов.
5 ответов
Единственный контроль над индексирующими роботами - это файл robots.txt. См. эту документацию , на которую Google ссылается на своей странице, где объясняется использование файла .
Вы можете запретить определенные ссылки и URL-адреса, но не обязательно ключевые слова.
Я работаю над сайтом, который входит в топ-3 рейтинга Google для тысяч названий школ в США, и мы делаем много работы для защиты нашего SEO. Есть 3 основные вещи, которые вы можете сделать (которые, вероятно, являются пустой тратой времени, продолжайте читать):
- Переместите то, что вы хотите преуменьшить, в нижнюю часть вашего HTML и используйте CSS и / или разместите его там, где вы хотите читатели, чтобы увидеть это. Это не скроет его от сканеров, но они будут ценить его ниже.
- Замените эти ссылки изображениями (вы говорите, что не хотите этого делать, но не объясняете, почему нет)
- Показывать другую страницу поисковым роботам с удаленными этими ссылками. В этом нет ничего плохого, пока контент в основном такой же, как видит браузер. Поисковые системы будут вас удивлять, если вы обслуживаете страницу, которая значительно отличается от того, что видят пользователи, но если вы удалите RSS-ссылки из версии индекса поисковых роботов, у вас не будет проблем.
Тем не менее, сканеры умны, и вы не единственный сайт, на котором есть постоянные ссылки и RSS-ссылки.Они заботятся о контексте и ищут термины и фразы в ваших заголовках и основном тексте. Они знают, как определить, что ваш блог посвящен технологиям, а не RSS. Я очень сомневаюсь, что эти ссылки имеют какое-либо негативное влияние на ваше SEO. Какую проблему вы на самом деле пытаетесь решить?
Если вы хотите построить SEO, выясните, какую ценность вы приносите читателям, и напишите об этом. Говорите интересные вещи, которые заставят других ссылаться на ваш блог, и сканеры поймут, что вы источник информации, который ценится людьми. Думайте больше о том, что ваши читатели видят и понимают, и меньше о том, что вы думаете , что видит сканер.
Нет, на самом деле ничего подобного нет. Существуют различные методы на стороне сервера, но если Google поймает, что вы отправляете своему боту другой текст, чем вы даете посетителям веб-сайта, он вас накажет.
Кроме черных методов на стороне сервера, вы ничего не можете сделать. Вы можете посмотреть, почему у вас так часто встречаются эти слова, и удалить некоторые из них с сайта.
Раньше вы могли использовать JS для «скрытия» вещей от робота Google, но теперь вы не можете этого сделать, когда он анализирует JS. ( http://www.webmasterworld.com/google/4159807.htm )
вы должны вручную обнаружить "Google Bot" из пользовательского агента запроса и передать им немного отличающееся от содержания, которое вы обычно предоставляете своему пользователю.