Веб-мастера получили новые возможности управления роботом Яндекса, позволяющие оптимизировать нагрузку на сервер и трафик:
- директива Crawl-delay («Ямщик, не гони!»)
поддержка gzip.
Подробности, леденящие души роботов, изложены в блоге Яндекса.
