Интересный подход с параллельным запуском коллекторов! Но что делать, если один из внешних источников (например, Reddit или Hacker News) начнет жестко отдавать 429 (Rate Limit) или просто зависнет намертво? Предусмотрены ли в конвейере таймауты «из коробки» для каждого Collector, чтобы самый медленный источник не дропал весь асинхронный pipeline?
С Google Trends и хайповыми темами вроде DeepSeek пример выглядит очень убедительно, так как в эти дни интернет буквально гремел новостями. А тестировался ли фреймворк на более специфичных и "тихих" бизнес-метриках? Например, если у нас локальный интернет-магазин автозапчастей и внезапно подскочили продажи конкретной категории. Сможет ли BM25 выудить крупицы полезного контекста из условных новостей индустрии, или для узких ниш придется писать кастомные внутренние Collectors (например, парсить календарь акций конкурентов)?
Интересный подход с параллельным запуском коллекторов! Но что делать, если один из внешних источников (например, Reddit или Hacker News) начнет жестко отдавать 429 (Rate Limit) или просто зависнет намертво? Предусмотрены ли в конвейере таймауты «из коробки» для каждого Collector, чтобы самый медленный источник не дропал весь асинхронный pipeline?
С Google Trends и хайповыми темами вроде DeepSeek пример выглядит очень убедительно, так как в эти дни интернет буквально гремел новостями. А тестировался ли фреймворк на более специфичных и "тихих" бизнес-метриках? Например, если у нас локальный интернет-магазин автозапчастей и внезапно подскочили продажи конкретной категории. Сможет ли BM25 выудить крупицы полезного контекста из условных новостей индустрии, или для узких ниш придется писать кастомные внутренние Collectors (например, парсить календарь акций конкурентов)?