5
ответов

Существует ли способ препятствовать тому, чтобы Googlebot индексировал определенные части страницы?

Действительно ли возможно подстроить директивы к Google до такой степени, что это проигнорирует часть страницы, и все же индексирует остальных? Существует несколько других вопросов, с которыми мы столкнулись, который был бы...
вопрос задан: 21 March 2016 17:28
5
ответов

Существует ли способ заставить роботы проигнорировать определенный текст?

У меня есть свой блог (Вы видите его, если Вы хотите от моего профиля), и это ново, а также роботы Google, анализирующие результаты. Результаты вызывали тревогу мне. По-видимому, наиболее распространенные 2 слова на моем...
вопрос задан: 3 January 2015 00:39
5
ответов

Как настроить robot.txt, который разрешает только страницу сайта по умолчанию

Скажем, у меня есть сайт на http://example.com. Мне бы очень хотелось, чтобы боты могли видеть домашнюю страницу, но любая другая страница должна быть заблокирована, поскольку паукам это бессмысленно. Другими словами, http://example.com & ...
вопрос задан: 2 November 2014 12:06
4
ответа

Как предотвратить Googlebot от подавляющего сайта?

Я выполняю сайт с большим количеством содержания, но мало трафика, на выделенном сервере среднего уровня. Иногда, Googlebot обратит в паническое бегство нас, приводя к Apache, истратившему его память, и...
вопрос задан: 25 August 2009 13:55
4
ответа

Googlebot, не уважая [закрытый] Robots.txt

По некоторым причинам, когда я начинаю работу, Google Webmaster Tool's "Анализируют robots.txt" для наблюдения, какие URL заблокированы нашим файлом robots.txt, это не то, что я ожидаю. Вот отрывок с начала...
вопрос задан: 20 January 2009 23:40
4
ответа

Googlebots игнорирование robots.txt? [закрытый]

У меня есть сайт со следующим robots.txt в корне: агент пользователя: * Отключенный: / Агент пользователя: Отключенный Googlebot: / Агент пользователя: Googlebot-изображение Запрещает: / И страницы на этом сайте добираются...
вопрос задан: 5 December 2008 19:12
3
ответа

Как делает Google Know, который Вы Скрываете?

Я, может казаться, не нахожу информации о том, как Google определяет, скрываете ли Вы свое содержание. Как с технической точки зрения Вы думаете, что они определяют это? Они отправляют в вещах...
вопрос задан: 23 May 2017 11:54
2
ответа

Google Увеличение Частоты Crawling/Indexing? [закрытый]

Когда-то назад Google раньше обновлял их индекс и обратные каналы каждые 3-4 месяца. Это раньше было большим обновлением. Недавно я заметил, что обновления являются слишком частыми. имеет кого-либо еще, заметил их вид...
вопрос задан: 25 January 2010 09:15
2
ответа

Почему был бы, Google (или Googlebot) индексирует страницу, возвращая 500 ошибок?

Googlebot иногда индексировал один из наших сайтов с плохим параметром строки запроса. Я не уверен, как это добирается этот параметр строки запроса (кажется, нет никаких сайтов, связывающихся с...
вопрос задан: 20 August 2009 23:47
1
ответ

Параметр списка в диалоговом окне для помощника Google не дает правильных результатов

Я изучал Dialogflow за последние 6-7 дней и создал бота, у которого есть меню в виде списка. Изучив много статей, узнал, что нам нужно провести мероприятие ...
вопрос задан: 18 January 2019 12:12
1
ответ

Почему и как googlebot использует поисковую систему моего веб-сайта?

Просматривание моего поиска время от времени регистрируется, я замечаю, что безусловно крупнейший пользователь моей поисковой системы является Google-ботом. Что дает? Это ищет содержание, которое не могло бы быть непосредственно...
вопрос задан: 4 August 2009 05:54
0
ответов

GoogleBot использует JavaScript и асинхронную выборку метаданных

У меня проблема с индексацией Google веб-приложения, использующего ReactJS & amp; Реактивный Шлем. Мы настроили SSR для лучшего SEO, и он хорошо работает практически со всеми поисковыми системами, кроме ...
вопрос задан: 18 January 2019 11:17
0
ответов

Почему робот Googlebot сканирует страницы / mobile / * и / m / *, на которые нигде нет ссылок?

С конца мая на странице «Ошибки сканирования смартфона» в Инструментах для веб-мастеров / поисковой консоли Google появилось много новых ошибок 404. Все они начинаются с / m / или / mobile /, ни один из которых не существует ...
вопрос задан: 12 May 2016 10:28
0
ответов

Сохраняет ли робот googlebot сеансы при сканировании?

Когда робот Googlebot сканирует страницы, есть ли у него сеанс? Например, я храню некоторые переменные в сеансе и использую их на страницах моего сайта. Когда робот googlebot сканирует эти страницы, у меня все еще будет ...
вопрос задан: 22 April 2016 20:36
0
ответов

Курсоры + пагинация и SEO

Хотелось бы знать, возможно ли пагинацию с помощью курсоров и одновременно сохранить эти страницы оптимизированными для SEO. /page/1 /page/2 Использование смещений, дает боту Google некоторую информацию о ...
вопрос задан: 2 May 2014 09:14
0
ответов

Как я могу узнать время последнего доступа робота Google к странице?

У меня есть следующая функция, чтобы получить дату последнего доступа робота Google: // получить последний доступ робота Google function googlebot_lastaccess ($ domain_name ) {$ request = 'http: //webcache.googleusercontent.com / ...
вопрос задан: 30 December 2013 23:17
0
ответов

Код состояния HTTP для перегруженного сервера

Несколько часов сервер моего веб-сайта слишком загружен. Какой код состояния HTTP я должен отправить роботу Googlebot, который посещает мой веб-сайт? Подходит ли для этого случая «269 Call Back Later» или 503 Service...
вопрос задан: 18 August 2012 21:36
0
ответов

Googlebot и «скрытый» контент внутри динамически отображаемых (js-вкладок )на странице -Влияние на SERPS?

Допустим, у кого-то есть «законно» скрытый контент на странице. Чтобы объяснить это дальше, представьте следующее :
Это содержимое внутри первой вкладки
вопрос задан: 22 July 2012 11:34
0
ответов

Робот Googlebot получает ошибку отсутствия шаблона для существующего шаблона

В последние пару дней мы начали получать ошибку отсутствия шаблона, когда бот Google пытался получить доступ к нашему основному домашняя страница (приветствие / указатель). Я смотрел на это пару раз ...
вопрос задан: 16 January 2012 14:57
0
ответов

Запросить проблему проверки только для Googlebot

У меня не так много волос, но я вырываю то, что осталось. Мое приложение MVC3 обслуживает изображения с помощью Action, например так / Image / ShowImage / 25-000252? T = a & o = 1 a - это предопределенный размер изображения, o - ...
вопрос задан: 11 June 2011 15:13
0
ответов

Робот Googlebot не видит контент, созданный с помощью jquery

Я использую jQuery для извлечения контента из базы данных с помощью запроса json. Затем он заменяет подстановочный знак в HTML (например,% title%) на фактическое содержимое. Это прекрасно работает, и таким образом я могу поддерживать свои ...
вопрос задан: 6 June 2011 07:22
0
ответов

robots.txt: user-agent: Googlebot disallow: / Google все еще индексирует

Посмотрите на robots.txt этого сайта: fr2.dk/robots.txt Содержимое: User -Агент: Googlebot Disallow: / Это означает, что Google не должен индексировать сайт, не так ли? Если это правда, то почему сайт появляется в ...
вопрос задан: 22 January 2011 16:59
0
ответов

Search engines not able to index asp.net site due to 302 redirects to Error page

I am having the hardest time determining the cause of our Asp.net site not getting indexed in search engines - the entire site. When I use google's "Fetch As Googlebot" tool, it throws the below ...
вопрос задан: 7 December 2010 00:35
0
ответов

Робот Googlebot выдает ошибку

У меня есть следующий код в качестве index.php для моего многоязычного веб-сайта. У каждого доступного языка есть подкаталог.
вопрос задан: 14 September 2010 09:49