Как стать автором
Поиск
Написать публикацию
Обновить

Комментарии 3

Звучит как что-то неоптимизированное. Сутки ради 100к доменов многовато как будто

Да, это долго для какого-нибудь продакшн решения. А здесь представлен простейший код с последовательными запросами. Чтобы работать быстро, нужно использовать асинхронные запросы и прокси.

Так проблема же не в параллелизме, а в ограничении со стороны сервера. Тут без прокси не обойтись.
Хотя для разовой задачи решение отличное!
p.s, и читать интересно. Спасибо!

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Публикации