Обновить

Комментарии 9

Речь не о спаме, а о нормальных осмысленных постах в правильных разделах. Иногда владельцы форумов сами нанимают меня, чтобы создать видимость живого общения.

это и есть спам

log_dir.mkdir(exist_ok=True)  # Создаёт папку, если её нет

Это такое палево что код был написан ИИ

я только учусь и не могу понять в чем то ошибка? всё работает

НЛО прилетело и опубликовало эту надпись здесь

работал я с открытым браузером, периодически проходил капчу. по этому с лимитами вопрос не стоял. DuckDuckGo насколько заметил вообще капчу не показывает, но мне его поисковая выдача для русскоязычных форумов не понравилась. А для чего статистика по отфильтрованным доменам? Гарантировано в выдачу результата попадают только уникальные и это большой плюс перед ручным поиском, когда через несколько страниц не видишь уже был домен или нет. Время запроса тоже настраивается по принципу минимум-максимум, что бы поисковик видел разную частоту запросов а не циклично с одним интервалом.

Парсить с помощью Chromium  ?
Через сколько времени прилетит капча?

Парсер использует браузерный движок Chromium, не хром в системе.
Яндекс каждые 3-5 страниц при работе парсера с интервалом 10-20 секунд. По гуглу уже не помню, им только для теста работал, основное набрал в Яндексе. DuckDuckGo - не видел капчи

Автору не мешало бы перечитать написанное, а так очень даже интересно, спасибо.

Спасибо за замечание, писал сразу на несколько сайтов статью, что бы было уникально, все переписывал руками и забыл убрать текст который для образца вставлял.

А за стиль изложения извините, с ИИ плохо, без ИИ тоже плохо :)

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Публикации