Начальник, хочу работать из дома

Всякие трекеры будуть скорее мешать продуктивной работе. Если вы фрилансер, то тогда да. Но в компании это врядли будет хорошой практикой.

Web crawler с использованием Python и Chrome

В зависимости от сайта, Distil палит селениум в лутшем случее через 30-50 запросов, в худшем через 1. Надо будет протестировать ваш вариант на досуге.

Web crawler с использованием Python и Chrome

Интересная статья. Но есть вопрос к автору: ваше решение сможет обойти Distil? И ко всем: как вы решаете проблему с Distil? Спасибо

Frontera: архитектура фреймворка для обхода веба и текущие проблемы

Если сайт не сильно мудреный — можно делать AJAX запрос руками. В большынстве случаев такой способ роботоспособный.