Хабр Курсы для всех
РЕКЛАМА
Практикум, Хекслет, SkyPro, авторские курсы — собрали всех и попросили скидки. Осталось выбрать!
Итак, Ваш сайт должен отдавать правильные заголовки сервера. Ответ — 200 Ок, ответ 404 — not found, ответ 403— forbiddeen, ответ 301 — moved permanently. Ваш сайт не должен отдавать ошибка 500 — server error, ошибка 502 — bad gateway.
Какая для поисковика разница между 403 и 404? 500?
В догонку: по настоянию того же подрядчика 302 редиректы со временно пустующих разделов каталога были заменены на 301. А потом в этих разделах появилсь товары… но зайти туда никто не мог, потому что браузер закэшировал 301 редирект.
А 301 редирект у бота кэшируется на длительный срок и это хорошо для продвижения, т.к. тогда поисковый бот успевает обходить большее число страниц, не тратя время на 404.
Где-то существует описание такой механики поисковых ботов?
Да только это рекомендации, чётких правил игры нет.
Идея черно-белого кино, правильных пчел и безоружных ниндзя в оптимизации сайта