dag_generator: лоукод-генерация гетерогенных Airflow DAG

Привет! Расскажите, пожалуйста, почему выбрали именно такой подход, а не dag factory (или её форк) и параллелизацию, например, через Spark? Какие ещё варианты реализации рассматривали?