Я исправил утверждение о больших комиссиях и долготе переводов Битка и Эфира.
Если вам так хочется покупать хлебушки за крипту, оформите карту у банка принимающего крипту. Будете пользоваться как валютной, конверсия в момент оплаты
Платное АПИ должно быть сбалансировано_платным (возможно бесплатным) относительно скрапинга веб версии. То есть лимиты к Веб версии должны быть такими, что-бы разделять реального пользователя и скрапера.
Публичный API. Вот решение для компаний, у которых есть каталогизированная информация. Борьба со скрапингом путём усложнения сайта, это путь в никуда. Вы тратите больше ресурсов для придумывания логик запросов и интерфейсов, и это никак не спасает вас, а только увеличивает финансовое сопровождение сайта. А ведь можно просто создать публичный АПИ, даже платный, установив на него такую цену, что-бы было проще купить АПИ, чем скрапить сайт. Так вы и свои сервера разгрузите и ещё денежку заработаете на трудах по каталогизированию.
Многие этого не понимаю и продолжают вливать деньги в борьбу со скрапингом, а могли как минимум экономить, как максимум зарабатывать.
Дело в том, что когда появился Селениум и ФантомЖС, в скрапинг нахлынуло много новых «пользователей», которые сам скрапинг узнали как раз как связка Selenium+Browser, оттуда пошли монструозные конструкции для скрапинга банального ответа GET'у. Так что в принципе польза от статьи есть, как раз для той категории, которые кроме как через браузер раньше не скрапили
Вторая стадия монструозности началась с момента, когда в браузерах реализовали собственные headless режимы (тогда PhantomJS закончился). Это развязало руки даже тем скрипткидди, которые раньше этого сторонились. Стало же так просто, открыл браузер, записал действия с помощью расширения Selenium'а, скопировал в скрипт, добавил headless и всё, можно в прод.
Бан наступает всегда, если квоту по запросам превысил. Здесь эвристики никакой и не нужно. Более 100 запросов в минуту — бан. Самое простое, что можно сделать со стороны сервера
Скиньте пример сайта, который блокирует свою работу, если вы не загрузили картинки. Хотя на самом деле попахивает не установленным заголовком User-Agent
Понятное дело что звук распознаётся на сервере, но ведь это не меняет ситуации. Ваша речь распознаётся. И по распознанию уже строится таргет. А добавьте ещё к этому приложения с доступом к микрофону и различными метриками для «бесплатности» приложения и вот уже несколько векторов подбора таргета
Ваш смартфон слушает вас условно 100% времени. Вы думаете за счёт чего смартфон способен реагировать на условное "ок Гугл"? Не забывайте также и про приложения, которые свёрнуты, они то не завершаются и в них наверняка 100500 трекинг систем типо гуглАдсенса или Яндексметрик. И вы как раз узнали, как эта технология перетекает в таргетированную рекламу
Перевожу в Лайткоине без комиссий и в течении 15 минут. А ещё есть 1000 альткоинов способных сделать даже лучше.
А Биток и Эфир сейчас финансовый инструмент на биржах
Никто и не говорит, что такой проект будет всегда "в текущей реализации". Как межспутниковую связь наладят, будет на весь океан охват.
И работает этот режим так, что если у сайта нет HTTPS версии, браузер вас об этом уведомит и даст возможность посетить HTTP версию
Платное АПИ должно быть сбалансировано_платным (возможно бесплатным) относительно скрапинга веб версии. То есть лимиты к Веб версии должны быть такими, что-бы разделять реального пользователя и скрапера.
Многие этого не понимаю и продолжают вливать деньги в борьбу со скрапингом, а могли как минимум экономить, как максимум зарабатывать.
НЦОТ это Мордор белорусского интернета, если что
Вторая стадия монструозности началась с момента, когда в браузерах реализовали собственные headless режимы (тогда PhantomJS закончился). Это развязало руки даже тем скрипткидди, которые раньше этого сторонились. Стало же так просто, открыл браузер, записал действия с помощью расширения Selenium'а, скопировал в скрипт, добавил headless и всё, можно в прод.
habr.com/ru/post/359403
habr.com/ru/news/t/459826
habr.com/ru/post/420983
habr.com/ru/news/t/447840
Статья о ложных срабатываниях «умных» гаджетов:
habr.com/ru/news/t/489792
Ваш смартфон слушает вас условно 100% времени. Вы думаете за счёт чего смартфон способен реагировать на условное "ок Гугл"? Не забывайте также и про приложения, которые свёрнуты, они то не завершаются и в них наверняка 100500 трекинг систем типо гуглАдсенса или Яндексметрик. И вы как раз узнали, как эта технология перетекает в таргетированную рекламу