Спасибо за перевод. Очень в тему. Особенно резанул последний пункт. В детстве мог запросто отхватить от взрослого соседа за плохое поведение или игры в заброшенном доме. Сейчас в том же окружении никто и слова не говорит ребёнку, который ломает чужое имущество. И это в РФ, где нет таких суровых законов.
Мы использовали свои технологии от и до. А за наводку на Томита-Парсер — спасибо! Хотя, он сущности находит в тексте, немного не то, чем мы занимаемся. Кстати, похожая технология есть у ABBYY.
Предоставляет маркетиплейс (где рекламодатель может встретить вебмастера (подчёркиваю может));
Налаживает финансовое взаимодействие (кошмар бухгалтера платить огромному количеству мелких субподрядчиков, а сети это умеют);
Предоставляют инструменты (монетизация контента, беннерокрутилки, ретаргетинг, XML-выгрузки и кучу всего ещё);
В РФ сети делают без дополнительной оплаты намного больше чем сети на западе, технических уровень поддержки и разработки в РФ в на порядок выше западного.
В любой сети (нашей и их) будет ручная сверка заказов, только в РФ может потребоваться делать это на распечатках в сотни страниц из-за непризнания цифровой переписки в суде. Это вопрос денег, а значит каждая сторона имеет право перестраховаться.
Новые рекламодатели приходят в сети, вебмастера тоже. А потом уходят. Это нормально. Кому-то CPA подходит, а кому-то нет.
Лично я не вижу смысла говорить, что CPA уже не тот. Ваше резюме про «строить свои схема привлечения заказов» абсолютно верно. Вот только представьте на сколько должен быть компетентен маркетолог, чтоб охватить все источники трафика? Есть ли такие специалисты в свободном доступе и готовы ли они работать только на один очередной магазин или продавца товарки? Готов ли этот продавец услышать зарплату от 500К в месяц (это всего то около $8К) (при том, что владелец пока сам столько не зарабатывает) и не рассмеяться такому самородку в лицо?
P.S. Если Вы рекламодатель в сети, попросите менеджера дать контакты вебмастера, объясните зачем Вам это нужно (разумеется Ваша цель должна совпадать с интересами сети) и в большинстве случаев Вам такой контакт дадут или продадут. И да, заходите на профильные форумы и общайтесь в вебмастерами напрямую, многие рекламодатели именно так уже и делают.
Крупные вебмастера так и делают, что на западе, что в РФ. Низкий порог входа — отличное определение. Причём что для рекламодателей, что для вебмастеров.
Инициатива должна исходить как от рекламодателя, так и от вебмастеров. Если сеть ни с одной стороны не пинают, то люди, оставаясь людьми, найдут чем себя занять помимо решения чужих проблем.
Отвечая на Ваш вопрос, не помогают, но и не мешают. Хотите — работайте, просите, добивайтесь, не хотите? Есть псевдо-автоматические каналы привлечения трафика (Директы там, ЭдВордсы) где достаточно закинуть деньги на баланс и трафик побежит.
CPA — это всего лишь ещё один источник трафик, только с другими правилами. Всё равно исход один — стоимость привлечения клиента.
Марат, канал жив и даёт до 30% продаж отдельным рекламодателям. Далее по пунктам, как Вы просили.
Фрод? Он есть, но есть и инструменты борьбы.
Долгие расчёты? Такая проблема есть только у арбитражников, площадки в западной практике ждут деньги по 3 месяца (им не горит). Для арбитражников проблема тоже решена, в большинстве сетей есть досрочные выплаты.
Учёт канала привлечения? Правило Last Cookie защищает рекламодателя как нельзя лучше, а для справедливости отношений есть мультиканальная атрибуция?
CPA всего лишь один из каналов привлечения трафика со своими особенностями. Хороший закупищик умеет работать с любым доступным каналом, даже ботовому трафику найдёт применение.
Главная особенность этого канала — необходимость выстраивать отношения с площадками (вебмастерами). А какие могут быть отношения в «внештатными агентами по продажам», если львиная доля рекламодателей со своими собственными сотрудниками в штате пока не научилась общаться.
Судя по статье Вы были на обеих сторонах, проверьте себя. Сможете по именам назвать ТОП10 вебмастеров, которые привлекали Вам продажи? И совсем сложный вопрос. Знаете ли Вы почему каждый из них перестал с Вами сотрудничать?
Что касается меня, раньше я был на стороне сети. Сейчас сам вебмастер в российских и западных сетях, а так же управляю рядом партнёрских программ. Больше всего бесит фрод, остальное — вопрос используемых аналитических инструментов.
Мы предоставляем API для тех, кто хочет делать сервисы для не технических специалистов. Кому нужно встроить функции парсинга данных или слежения за ценой в свои продукты. Мы не очередной парсер Яндекс.Маркета, у Product API проста функция по любому URL товара выдать информацию.
Если заказчик просит обработать конкретный сайт, то шаблон лучшее решение. А если нужно с уверенностью получить данные с любого интернет-магазина в любой стране, то без нашей технологии не обойтись.
Вы описали вполне жизненный кейс использования API. Наша забота — взять данные о товаре по URL, сколько таких запросов и из каких магазинов будут эти URL дело Ваше. Мы парсим данные и следим, чтоб магазины не банили.
Если будет спрос, то сделаем модификатор запроса не только на получение данных о товаре, но и отправку уведомления об изменении его цены в будущем на указанный callback_url.
За мнение — спасибо. Но у нас кончилось терпение на 200-м сайте магазина заниматься этим рукоблудием. Сейчас парсим 5822 магазина. Мы бы повесились вручную паттерны делать.
Да и когда повалил народ и стал добавлять такие магазины со скоростью 20 новых в минуту, да ещё такие о которых мы не знали, поняли, что либо юзеры утекут, т.к. подумают, что приложение не работает, либо нужно делать механизм, который с высокой вероятностью будет парсить нужные нам данные в любом интернет-магазине.
Вы описали краулер (ходит по URL), а у нас парсер (извлекает данные по URL). В интернете полно краулеров, которые могу начиная с главной пройти по всему дереву сайта, но вот URL для обработки они будут отправлять на Product API.
Что касается описаний товара, то нам эти данные были не нужны. Если окажется, что они будут полезны пользователям API, то будем и их извлекать.
Ваш подход имеет право на жизнь, но для реализации нужных нам функций пришлось отказаться от заданных вручную паттернов, хотя именно с них мы и начинали.
Что касается объема извлекаемой информации, нам были нужны только название, цена и изображение товара. По мере надобности добавляем новые параметры: бренд и категорию, например. Будем развивать API и дальше по мере появления новых потребностей пользователей.
Напомню, Вы решаете задачу парсинга конкретного сайта, а мы — автоматического парсинга любого сайта. Интернет пестрит предложениями «купить парсер avito.ru или ikea.com», написать парсер для сайта и т.д. Мы даём API, которое сразу работает с любым магазином.
Некоторые магазины для разных регионов могут менять цену. В будущем дадим возможность указывать для какого именно региона (страна и город) нужно проверить цену. Думаю, Вы столкнулись именно с такой проблемой. Ну а с защиты, конечно, обходим, куда без этого.
Отвечу честно, еще не определились. В одной из следующих статей сделаю сравнительный анализ аналогов с ценами и функциями. В начале будем демпинговать.
Для сайтов-витрин есть способ проще — XML выгрузки из партнёрских сетей. Быстрее и лучше работает. Вот только партнёрская программа есть у 1%-2% магазинов.
Вы правы, сравнивать цены нельзя, но мы и не ставили себе такую задачу.
Если Вы настроены серьезно, я могу написать в личку как минимум 9 кейсов, где Product API будет полезен и на которых Вы, как разработчик, сможете зарабатывать. Но только если Вы реально интересуетесь.
Эти данные мы пока не собираем, но в курсе, что такие товары есть. Изначально была идея научиться парсить варианты товара, правда, понаблюдав за пользователями, мы обнаружили, что таких товаров добавляют меньше 2% и отложили на потом.
Еще, смысл все-таки в постановке задачи. Если требуется парсить пару конкретных магазинов, то вариант сесть и написать скрипт с жёстко заданными шаблонами годится. Выше я уже написал что мы работаем с несколькими слоями данных а шаблоны и микроформаты всего лишь только 2 из 8.
Удобство Product API именно в автоматическом получении данных из магазинов, о которых ни вы, ни система ничего раньше не знали и которые еще норовят дизайн менять периодически. Как только количество магазинов, которые нужно обрабатывать, увеличится со 100 до хотя бы 500, ручной вариант, предложенный Вами, уже не будет работать — мы это проходили.
У нас сейчас добавлены товары из 5807 магазинов о большинстве которых я никогда не слышал, а пользователи, оказывается, там покупают.
В РФ сети делают без дополнительной оплаты намного больше чем сети на западе, технических уровень поддержки и разработки в РФ в на порядок выше западного.
В любой сети (нашей и их) будет ручная сверка заказов, только в РФ может потребоваться делать это на распечатках в сотни страниц из-за непризнания цифровой переписки в суде. Это вопрос денег, а значит каждая сторона имеет право перестраховаться.
Новые рекламодатели приходят в сети, вебмастера тоже. А потом уходят. Это нормально. Кому-то CPA подходит, а кому-то нет.
Лично я не вижу смысла говорить, что CPA уже не тот. Ваше резюме про «строить свои схема привлечения заказов» абсолютно верно. Вот только представьте на сколько должен быть компетентен маркетолог, чтоб охватить все источники трафика? Есть ли такие специалисты в свободном доступе и готовы ли они работать только на один очередной магазин или продавца товарки? Готов ли этот продавец услышать зарплату от 500К в месяц (это всего то около $8К) (при том, что владелец пока сам столько не зарабатывает) и не рассмеяться такому самородку в лицо?
P.S. Если Вы рекламодатель в сети, попросите менеджера дать контакты вебмастера, объясните зачем Вам это нужно (разумеется Ваша цель должна совпадать с интересами сети) и в большинстве случаев Вам такой контакт дадут или продадут. И да, заходите на профильные форумы и общайтесь в вебмастерами напрямую, многие рекламодатели именно так уже и делают.
Отвечая на Ваш вопрос, не помогают, но и не мешают. Хотите — работайте, просите, добивайтесь, не хотите? Есть псевдо-автоматические каналы привлечения трафика (Директы там, ЭдВордсы) где достаточно закинуть деньги на баланс и трафик побежит.
CPA — это всего лишь ещё один источник трафик, только с другими правилами. Всё равно исход один — стоимость привлечения клиента.
CPA всего лишь один из каналов привлечения трафика со своими особенностями. Хороший закупищик умеет работать с любым доступным каналом, даже ботовому трафику найдёт применение.
Главная особенность этого канала — необходимость выстраивать отношения с площадками (вебмастерами). А какие могут быть отношения в «внештатными агентами по продажам», если львиная доля рекламодателей со своими собственными сотрудниками в штате пока не научилась общаться.
Судя по статье Вы были на обеих сторонах, проверьте себя. Сможете по именам назвать ТОП10 вебмастеров, которые привлекали Вам продажи? И совсем сложный вопрос. Знаете ли Вы почему каждый из них перестал с Вами сотрудничать?
Что касается меня, раньше я был на стороне сети. Сейчас сам вебмастер в российских и западных сетях, а так же управляю рядом партнёрских программ. Больше всего бесит фрод, остальное — вопрос используемых аналитических инструментов.
Если заказчик просит обработать конкретный сайт, то шаблон лучшее решение. А если нужно с уверенностью получить данные с любого интернет-магазина в любой стране, то без нашей технологии не обойтись.
Если будет спрос, то сделаем модификатор запроса не только на получение данных о товаре, но и отправку уведомления об изменении его цены в будущем на указанный callback_url.
Да и когда повалил народ и стал добавлять такие магазины со скоростью 20 новых в минуту, да ещё такие о которых мы не знали, поняли, что либо юзеры утекут, т.к. подумают, что приложение не работает, либо нужно делать механизм, который с высокой вероятностью будет парсить нужные нам данные в любом интернет-магазине.
Что касается описаний товара, то нам эти данные были не нужны. Если окажется, что они будут полезны пользователям API, то будем и их извлекать.
Что касается объема извлекаемой информации, нам были нужны только название, цена и изображение товара. По мере надобности добавляем новые параметры: бренд и категорию, например. Будем развивать API и дальше по мере появления новых потребностей пользователей.
Напомню, Вы решаете задачу парсинга конкретного сайта, а мы — автоматического парсинга любого сайта. Интернет пестрит предложениями «купить парсер avito.ru или ikea.com», написать парсер для сайта и т.д. Мы даём API, которое сразу работает с любым магазином.
Вы правы, сравнивать цены нельзя, но мы и не ставили себе такую задачу.
Если Вы настроены серьезно, я могу написать в личку как минимум 9 кейсов, где Product API будет полезен и на которых Вы, как разработчик, сможете зарабатывать. Но только если Вы реально интересуетесь.
Удобство Product API именно в автоматическом получении данных из магазинов, о которых ни вы, ни система ничего раньше не знали и которые еще норовят дизайн менять периодически. Как только количество магазинов, которые нужно обрабатывать, увеличится со 100 до хотя бы 500, ручной вариант, предложенный Вами, уже не будет работать — мы это проходили.
У нас сейчас добавлены товары из 5807 магазинов о большинстве которых я никогда не слышал, а пользователи, оказывается, там покупают.