Вопрос теоретический. Я так скажу, что мы занимаемся парсингом оч. давно, что многим не нравится, но это приносит деньги. Продажа баз — это следующий уровень парсинга сайтов, более законный кстати. И это тоже приносит деньги. Но в 100% правовом поле (хотя есть нюансы в части персональных данных которые мы можем случайно собрать). Если это законно — этим можно и нужно заниматься.
дело в том, что мы не шлем спам. Мы просто делаем базы. Можно звонить, можно слать письма. Вы ведь сами написали, что «левого» спама хватает, но быстро отписывают.
да. я не вижу разницы между нами и яндексаом в части права доступа к данным. Мы не занимаемся взломом, перебором паролей, поиском уязвимостей и т.п. Нас интересуют открытые цены на товары и сам ассортимент. Остальное — не интересно вообще.
Мы не парсим выдачу, я писал выше. Мы настраиваем парсер на сам сайт. Разбирая его верстку html. То есть мы идем от ресурса, а не от товара. Ну а цены — скажу честно — так сложилось, на первых клиентах обкатали, поняли — что цены разумные.
почему — т.к. там нет ЦЕН, а они нам нужны.
в 99.9% никто не закрывает в роботс цены и товары.