Pull to refresh

Comments 16

Я бы скорее предположил, что у гугло-бота есть расписание для индексации. Страницы первого уровня — в первую очередь, второй уровень — во вторую, а всякие скрипты обрабатывает по остаточному принципу в «свободное время»
Гуглобот в свободное время не читает хабр, не общается с друзьями, даже не играет в игры, а исполняет яваскрипты. Тяжела жизнь гуглобота.
Я думаю, гуглобот читает хабр в рабочее время :-)
Ага, только вот писать ничего не может, профайл Googlebot в RO.
Дайте ему кто-нибудь инвайт, ужасно интересно, что напишет.
Он все понимает, но ничего не говорит…
Возможно он сливает JS-корд с сайта два раза: при первом заходе и через три дня после него. И затем уже сравнивает результат выполнения того и другого.
Чем-то напоминает один из основных сюжетных поворотов в «True Names», о котором, впрочем, я не стану распространяться подробно, чтобы не наспойлерить.
Возможно, что собственно обработка и индексация некоторых страниц у него идет не сразу, а через некоторое время. Просто сначала повытягивал страницы, а потом через три дня парсит их.
может просто кто то просматривал страницу с гугл кеша в гугл переводчике.
Вопрос не много не по теме. Значит можно теперь не делать «статическую» версию сайта, гуглобот нормально и динамическую переварит?
Напомнило баянистый код получения завтрашней даты

void get_tomorrow_date( struct timeval *date )
{
 sleep( 86400 ); // 60 * 60 * 24
 gettimeofday( date, 0 );
}
Так и YandexBot делает то же самое, причём ходит и по url из Yandex.Direct, поэтому User Agent «Mozilla Compatible Agent» в Google Analytics нужно заносить в исключение, чтобы не рос показатель отказов (Bounce Rate) для отчётов оплачиваемой рекламы.
Sign up to leave a comment.

Articles