Инструмент контроля за поведениеем роботов на вашем сайте

[chudinov]

система работает в beta режиме, не все открыто для рядового НЛО

[RubyFOX]

Так где код для размещения на сайте взять?
Вы его временно выпилили?
Там внизу даже сами на свой вопрос не отвечаете:

Какой код мне нужно разместить на своем сайте?
Следить за содержимым sitemap (валидация согласно протокола), целостностю данных в Robots.txt Обеспечить консистентность данных Sitemap.XML & Robots.txt

[chudinov]

код для размещения будет доступен чуть позже (сорри) в начале июня (пока раздаю коллегам) далее — для всех

[jiexaspb]

Интересно было бы узнать про техническую сторону вопроса.
Как используете mongodb? Выборку делаете уже по данным из mongodb или переносите в SQL базы?

[chudinov]

SQL уже не использую. С 2008 года и до 2010 юзал PostgreSQL но потом перенес все в монго

[chudinov]

если кратко, то по схеме: 1 сайт = 1 коллекция в монго. Шардинг и прочие сладости позволяют не думать о числе анализируемых доменов. Кроме этого, выборка для отчетов происходит быстро, не говоря уже об апсертах.

[reaferon]

Забавно. Добавил сайт — и ни единого намека на то, где взять код для размещения. И для подтверждения.

[chudinov]

reaferon, задача поста другая — получить совет. Раздавать инвайты знакомым не хотел, сейчас их сайты анализируются пока сервис проходит нагрузочное тестирование. Для меня сейчас важно получить список хотелок от специалистов, которых я не знаю, и не знаю их потребности (глаз замылен своим представлением). Код вызова в паблике появиться достаточно скоро.

[chudinov]

Все пожелания, сообщения об ошибках, с радостью выслушаю в личных сообщения, спасибо.

[chudinov]

Коллеги,
Инструкция по установке кода (версия PHP) размещена в разделе «Мои сайты».

[Sk8er]

Почему нет стандартной регистрации? Не люблю авторизироваться через различные сервисы.

[chudinov]

мы не планировали «стандартную регистрацию», хранить ваши учетные записи, восстанавливать пароли и т.д. — зачем это, если есть готовые проверенные решения