Comments 25
Данный бот-парсер телеграма подойдет для использования в качестве антиспама/модератора?
Как основу использовать можно, но если сообщений много, будет дорого за счет API LLM. Для такого лучше использовать что-то более специализированное. Как пример вот из этой статьи.
Доброго дня. Немного оффтоп вопрос: в сколько будет стоить сделать парсер Рутрекера, чтобы забирал опреленные значения из раздела на сайте и сравнивал их с уже имеющимися на отдельном файле?
Похоже, вам нужна RSS-лента.
Заходите в интересующий вас раздел. Например, "Игры для Windows - Горячие новинки". Адрес - rutracker.org/forum/viewforum.php?f=635
Запоминаете 635 - код раздела. Делаете ссылку на RSS с этим кодом
https://feed.rutracker.cc/atom/f/635.atom
Вставляете в любую RSS-читалку, и у вас будет лента всех новинок.
У Телеграма в связке с RAGом хороший потенциал. Я несколько месяцев назад с другого конца решил зайти и добавил в себе в поисковик кроулинг и индексацию публичных каналов. Ссылка есть в профиле, если интересно.
Данные из телеги могут хорошо отвечать на запросы свежести, типа новостей, на локальные запросы - а-ля "рестораны в Москве", "события в Берлине", и на OSINT - тут все понятно. Внезапно интересным оказался кейс поиска вакансий - в каналах много чего постится, о чем на сайтах не пишут. В итоге, одним поисковым запросом удается выгрести вакансий за фиксированный период больше, чем показывают профильные сайты.
Короче, данные в Телеге хорошие, осталось только AI правильно приложить.
Что-то из серии как нарисовать сову….
Как юзер бота-то сделать?
Как пример, вот как в этой статье - https://habr.com/ru/companies/amvera/articles/838204/
Получится ли использовать описанный инструмент для оптимизации времени ознакомления с новостями. Пример так - за меня новости в епнпла читает userbot, а я могу задать вопрос - самая часто встречающая новость тут топ 5 по упоминаемости
Ну по сути там сказано что сообщения обрабатываются и даётся нормальный ответ с человеческим языком, то есть можно сказать что там мини -нейросеть и если всё сообщение удастся впихать то да
Попробуй посмотри проект nyan
https://github.com/NyanNyanovich/nyan
Есть уже готовые тг каналы, развёрнутые автором, с аггрегацией каналов, который выбрал автор проекта, но можешь и сам развернуть и настроить, как удобно
А получается он сможет автоматически собирать сообщения в кучку пока люди пишут и потом обрабатывать информацию с нескольких чатов?
Не совсем. Для того что б собирать сообщения в кучку и присылать (мне) только саммари (в котором нет того что мне не интересно) - достаточно готового бесплатного бота, типа @shift_summary_bot
А в чем ценность данной статьи?
Почему не OpenAI или GigaChat от Сбера?
А стандартной лупы, где даже можно все сообщения от конкретного пользователя искать, уже недостаточно?
За лупой кроется необходимость знать конкретного пользователя. Как это поможет с ответом на вопрос, о чём вчера вечером нафлудили на тысячу сообщений?
Парсинг и юзерботов не одобряю, из-за них участников чатов постоянно заспамливают и скамят разные деятели. Для альтернативных клиентов телеграму KYC бы не помешал. Хотя бы какая-то ответственность и усложнение обхода для мониторинга.
Я не понял, что здесь является парсингом.
Как система справляется с цепочками ответов? Ну когда у тебя головное сообщение и от него растёт тред в виде дерева, ответы на ответы, разветвления и тд, ведь контекст размазан по треду и в сообщении может описываться объект, который явно не называется в этом сообщении, но упоминается на уровнях выще.
А кто-нибудь подскажет, если парсить раз в день постов по 20 из публичного канала, банит ли за такое телеграм? Просто написал скрипт, решил потестить, только авторизовался, попробовал получить 10 штук и через минуту пришло сообщение от "Abuse Notifications)" "
We detected suspicious activity on your account.
Here are the security measures that have been taken to protect you:
Suspicious active sessions have been reset.
That was done to prevent access to your chats and data. To see all active sessions, go to Settings > Devices (or Privacy and Security > Active Sessions). If you see any device you don’t recognize, you can terminate the session there.
You can also set up an additional password for your account in Settings > Privacy and Security > Two-Step Verification. и тд"
Аккаунт не тронуло, разлогинило старые сессии и пару ботов (которые использовал для Hermes/Openclaw) попали в Freeze
Возможно дело было в реализации клиента, что это был async, и в моменте оказалась пара активных одинаковых сессии? кто сталкивался?
Парсинг Телеграм каналов, групп и чатов с обработкой в LLM