Обновить

Кто ходит по вашим сайтам, пока вы спите

Уровень сложностиПростой
Время на прочтение18 мин
Охват и читатели12K
Всего голосов 11: ↑6 и ↓5+3
Комментарии35

Комментарии 35

график посещаемости вашего сайта бодро пошёл вверх, а доход от рекламы остался лежать на полу

Так реклама, у юзеров - вырезана наглухо.

У реальных юзеров, живых.

Да, но не всегда. А у ботов - всегда.

Кому придёт в голову - смотреть рекламный шлак?

Он мешает всегда, везде.

Некоторые сайты криво работают если "щит поднят", поэтому у меня основной браузер без рекламы, но есть дополнительный, без баннерорезки, и если я в него зашел для одного проблемного сайта (может просто он почему-то не работает, непонятно почему) - то могу и другой в нем же открыть.

Ну так рекламорезки на уровне устройства, как на андроиде Adguard, или в роутере. В браузерах - это уже вторая-третья линия обороны.

Так что браузер без расширений - не поможет прояснить ситуацию..

И что за ублюдки делали сайт, если он ломается от рекламорезки? Как такое вообще возможно?

смотреть рекламный шлак - не смотрю. но и баннерорезок у меня нет. только баннерная слепота. как-то так вот повелось. да и у знакомых класса "домохозяка" их нередко нету.

и все равно некоторые сайты просят баннерорезку выключить.

Зачем выключать необходимый юзеру инструмент?

Боты – идеальные посетители: приходят толпами, ничего не покупают, рекламу не смотрят и даже картинки не подгружают. Мечта любого сайта, которая почему-то не превращается в деньги – а живые тем временем сидят с адблоком, как с берушами и повязкой на глазах.

как с берушами и повязкой на глазах.

Беруши и повязка работают только против мусора. Контент они пропускают к пользователю.

Таких посетителей обычно выдаёт либо громкость, либо оставленная на столе визитка.

Ну твайужналево, вычитывать надо за нейронкой-то... Готов спорить, что в оригинале было volume, что в контексте означает не громкость, а объём.

Чувак, это и есть оригинал. Понимаю, что редкость и непривычно, но придётся как-то с этим теперь жить. "Громкость" здесь метафорическая. Сервер слышит бота не ушами, а журналом: сотни запросов в секунду, перебор /.env, wp-admin и случайных PHP-файлов. Это как пытаться незаметно войти в библиотеку на тракторе. Краулер был опаснее именно потому, что пришёл в тапочках.

Все равно за нейронкой вычитывать надо было. Это для вас оригинал, а где ваш ии учился - volume

Мысь "предложить ботам скачивать именно то, что они хотят, через удобный и шустрый API, без необходимость мучить ж вынуждать их — имитировать человека, а сервер — слать ненужные им мегабайты данных" в голову, я так понимаю, не приходила.

Вот я, в частности, нахожусь с другой стороны баррикад. Нам нужны цифры, и больше ничего. Однако ежедневно приходится перепрыгивать через сотни ловушек, расставленные вот такими вот хитренькими. Зачем? Сначала выкладывать свои данные на публичное обозрение — а потом жаловаться, что их публично обзирают — то такое...

ну выкладывающий - "хозяин барин". Может сам решать, для чьего обозрения он выкладывает. Кому он эту информацию готов бесплатно дарить, а кому только за денюжку, а кому вообще ни за что.

решать, для чьего обозрения он выкладывает

А как он может различить приходящих?

От того, что я сделаю API, боты, которые прикидываются человеком и жулики, которые ищут уязвимости, не исчезнут. Кроме того, за API у нас платить не принято, проще бота собрать и качать бесплатно. Поэтому, с точки зрения экономической целесообразности, API сомнительная тема.

Просто элементарно отправляйте не кешируемый js который чекает navigator.webdriver , если скрипт не запрашивается или возвращает true значит бот.
99% сразу отсеяться, прямой протокол полного браузера почти не используется, а если и используется то это будет очень медленно и дорого для промышленного кравлинга.

Теория "Мертвого Интернета" нашла эксперементальное подтверждение?

Самое смешное, что такая защита посчитает человека, который ищет информацию в Сети натравив на неё выводок агентов-ботов именно за бота. Хотя на конце этого пути сидит человек, который является конечным получателем информации.

Я думаю, скорее должен умереть условно бесплатный интернет основанный на рекламе и шпионаже за пользователями. А возникнуть новый на донатах и сообществах.

Конфликт вызван тем, что старый метод монетизации не соответствует реалиям, а новый никто не предложил. При этом пользователь с десятком ботов создаёт десятикратную нагрузку на сервер, а платить за его удобство должны владельцы сервера.

Мне кажется, это перекладывание с больной головы на здоровую. Ошибка, которую заложили давно аукнулась вот в этом, но заложена она не тут, и не сейчас. Давайте прикинем, какой контент обычно получают боты? Они ведь не какие-то дорогие запросы делают (скажем, кликают кнопки в онлайн-редакторе видео). Они (в 99.9%) делают GET запросы, то есть, получают статику. И вот даже такая нагрузка создает невыносимую тяжесть бытия для сервера.

Исходно корень проблемы в том, что сайты работают неправильно, они постоянно дергают базу: А какой у нас title? А какая тема оформления? А какой цвет фона в этой теме оформления? А блок контактов у нас справа внизу или слева внизу?

Название фирмы и ее контакты, текст про "мы молодая успешная команда профессионалов, бла-бла-бла", стиль офомления - все это не меняется годами, но какой-нибудь вордпресс или другая древняя CMSка может перезапрашивать это несколько раз в секунду! Плюс еще плагины понавешены... (многие из которых написаны школьниками). Конечно, пока это крутится на компе разраба и у сайта один визитор в день - это все шустро работает. Даже на сайтах с живыми пользователями (до эпохи мертвого интернета) это уже работать могло плохо. У меня в практике был сайт на выделенном сервере, который хорошо работал в обычные дни, но вот в черную пятницу (когда товары просто разлетаются и важно чтобы сайт успел продать все, что хотят купить) - он ложился. Работал дико тормозно, потому что когда клиентов x20 от обычного числа - ему это тяжело.

В общем, делать вебсайты в 2026 по технологиям, выученным в 2006 - это зло. Решение есть - Jamstack (это название подхода, не продукт, продуктов много, мне нравится Hugo, но это вопрос вкуса). Сайт должен поставляться как статика + API. То есть, какой-нибудь сайт Леруа - отлично превращается в статику и раздается или с CDN (cloudflare) или с собственных серверов статики. Единственный момент, где необходимо дергать API - это оформление заказа и оплата. Нагрузка на сервер падает во много-много раз, а пользовательский опыт и оценка сайта поисковиками - вырастает. Потери функционала - нет. Логика и API должны быть только там, где они необходимы, а не там, где их писали деды наши славные.

Традиционные CMSки - тупиковая ветвь эволюции. Они появились во времена, когда JS еще не было или он был очень слабым, и решали эту проблему. Сейчас JS уже сильный - вы можете и леруа и авиасейлс сделать через статику с JS/API.

Ну и как безопасник, я обожаю Jamstack. Сломать статический сайт - это прямо околофантастический сценарий. Зачем люди добавляют всякий PHP там, где и без него хорошо - я не понимаю. Если бы исходно сайт делался по такому принципу - никакой проблемы высокой нагрузки на сервер просто не было бы.


Сломать статический сайт - это прямо околофантастический сценарий

Именно так!

Почему не делают нормальную статику - непонятно..

а новый никто не предложил.

Давно предложены. Все те, где деньги берутся прямо с тех лудей, что контент хотят увидеть. Просто пользователей еще не приучили в нужной степени а контента, раздаваемого по старым схемам - еще хватает.

Проблема в том что пользователь развращён бесплатным (реклпмным) контентом что платить (донатить) совсем не готов.

Почему контент должен быть сопровождаемым рекламой?

Я не утверждаю что контент должен сопровождаться рекламой, я говорю что создание контента должно вознаграждаться.

Но к сожалению другие способы вознаграждения создателей работают плохо.

Ну так реклама - уже не работает. Её убивают всегда, все и везде..

Её последнее пристанище - ТВ с прямыми трансляциями и радио..

интересный коммент на сайте, 100% (если не ошибаюсь) доходов которого или напрямую или через 1-2 шага идет именно с рекламы.

У меня нет исключений. Реклама убита везде и всегда.

Но есть выход - делать отдельную страницу с рекламой. Я могу открыть её в фоне и натравить свой AdNauseam - он скликает всё..

А на обычных страницах он тоже скликивает, всю, но сами элементы рекламы - полностью скрывает от меня, в том числе и перевёрстывая страницы Хабрв "на лету"

А может Хабру просто сменить источник финансирования?

Ой ли? Он платит в играх, он платит девочкам АСМР за их свистелки, шуршалки.. А тут прям так и не готов ) Это от развращенности, определённо. На Бусти разврат, поэтому там платят. А я не такая, я жду трамвая, мне платить не надо. Я буду рекламой торговать.

У меня есть проект с тысячами посетителей в месяц. Я сознательно отказался от рекламы на сайте и как вы думаете сколько донатов я получаю?

Ноль донатов.. это без вариантов.

Ну, не настолько плохо. Например сегодня получил 300р. 😀

Ротшильд! На бокал пива хватит.)

Но если серьёзно - то любой проект следует считать изначально убыточным, ибо кроме затрат - ничего не может доставлять автору. И когда проект покатил - тогда и надо начинать думать о том как его отбивать. Сайт - всегда заведомо убыточное предприятие.

Мы приняли склад старых дверных ручек за доказательство существования дома.

к этому моменту ты задрал уже с кучей неуместных аллегорий

твой аккаунт имитирует настоящего писателя, но на самом деле всего лишь прослойка между ИИ и сайтом

имею право

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Публикации