Вслед за авторами хабра, ругавшихся на рамблеровского робота, позволю себе кинуть кусок минеральной породы в огород Яндекса.
5 гигабайт трафика в месяц лишними не бывают, это и привлекло мое внимание — расследование вывело на след паука нашего горячо любимого поисковика. Скриншот под катом — обратите внимание, насколько колоссальна разница в «усердии» ботов различных поисковых систем, в том числе гугла, яху, а также некоторых других. Яндекс — рекордсмен — накачал на 4 с лишним Гбайт трафика за текущий месяц, что составляет 87% от всего трафика на домене.
Скриншот
5 гигабайт трафика в месяц лишними не бывают, это и привлекло мое внимание — расследование вывело на след паука нашего горячо любимого поисковика. Скриншот под катом — обратите внимание, насколько колоссальна разница в «усердии» ботов различных поисковых систем, в том числе гугла, яху, а также некоторых других. Яндекс — рекордсмен — накачал на 4 с лишним Гбайт трафика за текущий месяц, что составляет 87% от всего трафика на домене.
Скриншот