AI-агрегатор новостных лент или как выжить в эпоху информационного изобилия

[osj]

Сделал систему на основе FreshRSS: статьи из лент сохраняются в PostgreSQL, n8n выбирает материалы по категории и объёму, GPT (бесплатно) делает саммари и перевод на русский. После этого запускается поиск дубликатов через pgvector , так как источники на разных языках и могут пересекаться. Уникальные тексты автоматически публикуются в канал.

[yuryweiland]

Супер! Как по нагрузке у вас вся эта связка работает? Если GPT именно OpenAPI - много ли по токенам съедает? И где разворачивали если не секрет

[osj]

FreshRSS, n8n и GPT4Free/OpenRouter(бесплатные лимиты, не отслеживаю токены) помещаются в 1 ГБ RAM — всё работает в Docker на обычном minipc или VPS, даже при параллельной нагрузке.

[xxasaw412]

Есть ещё syft ai

[ktibr0]

Nyan новости. Делает похожее, но с телеграм каналами.

Использую уже более года.

Очень изящное решение, когда схожие новости объединяются, дополняют друг друга, а в сообщении в телеграм также вставляют комменты со ссылками на оригинальные новости из тг каналов

[yuryweiland]

Пока еще глубоко эту сферу не изучал и о них не слышал, но лайк отдельный что это тоже open source - как понимаю, там построили функционал вокруг Telegram API - поначалу тоже так планировал, а потом отдельно выделил в API все переиспользуемые фичи

[samako]

Я как раз пишу что-то подобное для себя на PHP. Интересно будет сравнить подходы. Спасибо за статью.

Однако должен заметить, что github линк на сайте не откывается, регистрация тоже не работает.

[yuryweiland]

Спасибо за фидбэк! Починил логин и регистрацию - пока проект на старте, тестирую в лучших традициях на проде и порой бывает что-то да отвалится ...)

[samako]

Написал в личку