Comments 8
ставит под удар всю логику функционирования интернета, действовавшую со времён первых домашних страниц — теперь, когда более половины посещаемости любого сайта, в среднем, становятся боты.
Это проблема и для контентных ресурсов, живущих за счёт рекламы, и для e-коммерса, платящего при покупке рекламы живые напополам с автоматическими переходы.
А вот неправда. Рекламная модель появилась чуточку позднее 'времен первых домашних страниц'.
И если текущая ситуация, что описана в примерах - она успешно сдохнет, то, с некоторой стороны, этом может быть и к лучшему.
Правда, придется привыкать, что бесплатного в Сети станет чуточку поменьше. Но и сейчас надо понимать, что оно далеко не бесплатное, а оплачено заметной частью стоимости товаров и услуг. Если придется платить напрямую - это, возможно, к лучшему.
Так ведь и хорошие боты при таком подходе не пройдут. А учитывая, что сейчас набирает популярность поиск нейросетками, подобная защита может в будущем сыграть против.
"на промежуточном сервере" почему из статьи в статью, встречается этот промежуточный сервер? Разместить скрипт проверки в соседней папке, что мешает? В чем его существенное преимущество, чтобы побороть минусы в виде задержка отклика и его содержание и т.д.?
Прокси сервер переносим из системы в систему, скорее всего сделан так, что позволяет закрыть несколько ресурсов (доменов) в одной системе, а скрипт из папки привязан к архитектуре и языку одной конкретной системы.
В маленьких проектах лучше скрипт в папке, в проектах побольше - прокси сервер.
Можно и на своем сервере настроить в соседней папке - тут главное ничего не сломать. Отдельный сервере удобен тем, что нет проблем совместимости, не нужно заморачиваться с настройкой. Прокси сервер можно развернуть в облаке и в один клик увеличить мощность при необходимости.
В эпоху когда боты могут общаться свободно на человеческом языке(хоть по видео звонку) понимая контекст и решают математические задачи такие попытки тщетны. От тупой ddos атаки может и спасёт, от мощных ботов вряд-ли. Ботов станет делать чуть дороже
Все вот эти антиботы, которые радостно рубят бабки с хозяев сайтов, разгоняя их надуманные страхи (как, например, что парсеры будут дружно смотреть один коврик, перекашивая маркетинговые метрики, вместо того, чтобы равномерно дать +10 просмотров в день на весь инвентарь), забывают сказать одну вещь.
А она в том, что даже сейчас уже часть людей посылает бота выбрать себе товар. Условно, ввел в дип ресеч "мне нужен коврик для йоги, с таким то временем доставки, с такой то эстетикой, а по материалу и производителю реши сам, исходя из обзоров". И бот уже сегодня идёт от имени реального покупателя с реальной потребностью выбирать товар. Логично, что магазин, которому не нужен +1 покупатель, он просто обойдёт стороной.
И, пока одни люди всерьёз уже обсуждают проблемы маркетинга для роботов (ибо, ок, мы знаем, как впарить человеку, но, что мы будем делать завтра, когда в цепочку принятия решений добавится личный ассистент?), то, да, самое время в последний раз напугать вебмастеров, и продать им антибот, пока те мыслят старыми шаблонами, и тоже не задумались
Как работают антиботы