igrishaev Jul 20 2012 at 14:32

Queryfeed — RSS-ленты из Твиттера и Фейсбука

2 min

8.3K

Python*Google App Engine*

+16

Comments 33

omelics Jul 20 2012 at 14:37

А API есть?

igrishaev Jul 20 2012 at 14:41

API нет, но ссылки на ленты можно формировать вручную. Например, www.queryfeed.net/twitter?q=foobar

omelics Jul 20 2012 at 15:33

Спасибо большое! :)

w008 Jul 20 2012 at 14:51

Возможно ли получать сообщения из определенного списка?

2r2w Jul 20 2012 at 15:10

И twitter и facebook уходят от RSS (есть переводная статья на хабре), и по-совместительству являются убийцами RSS.
почему бы не поиспользовать что то типа Prismatic ( или Flipboard на телефоне), и не плодить велосипедов?

-3

dpigo Jul 20 2012 at 15:50

Наверное потому, что они не предоставляют желаемого сервиса.

igrishaev Jul 20 2012 at 15:55

Эти статьи я читал, спасибо.
Фейсбук и Твиттер уходят от РСС по маркетинговым, а не техническим решениям. РСС — открытый, удобный формат передачи данных. Если каждый сайт начнет городить свои API для извлечения новостей, то что будет с интернетом?

dpigo Jul 20 2012 at 16:08

Из пожеланий: хотелось бы автоматически формировать набор лент из существующих фоловеров/друзей посредством авторизации в соответствующих сетях и последующим экспортом в OPML, ибо поодиночке добавлять всех не очень удобно.

dpigo Jul 20 2012 at 17:38

Еще хотелось бы дополнить список поддерживаемых сетей популярными нынче инстаграмом, форсквером, гугл плюсом.

Кстати, спасибо за замечательный инструмент, попробую перетащить из твитдека все гугл ридер.

dpigo Jul 20 2012 at 19:25

Попробовал. Вышло как-то странно: не получается толком организовать т.н. timeline, сложив все фиды в папку и отсортировав по дате.

Фиды автоматически не обновляются при поступлении в них новых сообщений из твиттера.

dpigo Jul 20 2012 at 19:51

Так, фиды обновляются, но судя по всему для таймлайна твиттера гугл ридер не подходит ибо частота обновления фидов слишком низкая и записи оттуда берутся пачкой

igrishaev Jul 21 2012 at 12:20

Да, тоже с этим столкнулся. Нужен ридер, в котором можно выставлять произвольную частоту обновления лент.

dpigo Jul 20 2012 at 19:01

Кстати, с фейсбуком не все так радужно как с твиттером, не удается создать фид конкретного пользователя.

igrishaev Jul 20 2012 at 19:07

В фейсбуке вообще странно поиск работает и в нем уровень приватности выше, многие запросы требут авторизации.

BelAnt Jul 24 2012 at 16:27

RSS в фейсбуке:
www.facebook.com/feeds/page.php?id=<profile_id>&format=atom10

profile_id можно найти в коде страницы без проблем

BelAnt Jul 20 2012 at 16:55

В твиттере есть RSS ленты по каждому аккаунту, просто они хорошенько запрятаны. Любого пользователя можно читать самостоятельно склеив URL: twitter.com/statuses/user_timeline/<data-user-id>.rss

Smi1e Jul 20 2012 at 17:37

Как узнать data-user-id не подскажете? Это же не имя аккаунта.

BelAnt Jul 20 2012 at 17:41

data-user-id = login

Smi1e Jul 20 2012 at 18:41

Спасибо. Пробовал на закрытом аккаунте, поэтому получил ошибку.

Smi1e Jul 20 2012 at 17:36

В поле link после каждого адреса добавляется двойная кавычка ". Из-за этого ссылка становится нерабочей.

igrishaev Jul 20 2012 at 17:57

Спасибо, исправил.

fenst Jul 20 2012 at 17:42

Ура! Только сегодня искал в гугле подобное решение, но так ничего легкого и не нашел. Спасибо.

personazhe Jul 20 2012 at 19:16

Спасибо! Давно ждал подобного решения!

aleks_raiden Jul 20 2012 at 21:08

Вы так расписали, что ничего полезного не приносите в мир интернета, как буд-то гордитесь этим. Печально, что такие люди существуют :(

-2

ajaxtelamonid Jul 21 2012 at 09:48

503 This application is temporarily over its serving quota.

igrishaev Jul 21 2012 at 12:18

Уже работает. Чуть-чуть не дотянул до обнуления квот.

TIgorA Jul 21 2012 at 15:27

У твиттера ограничение на чтение RSS с одного сервера, 150 запросов в час.

igrishaev Jul 21 2012 at 15:30

Сервис хостится а App Engine, а там HTTP-запросы шлются с разных серверов, т.е. IP будет тоже разный.

and7ey Jul 21 2012 at 21:08

Хостится в облаке App Engine. Код не привязан к архитектуре GAE, чтобы в любой момент можно было оттуда съехать.

Расскажите об этом, пожалуйста, более подробно (можно даже в виде отдельной статьи).

igrishaev Jul 22 2012 at 08:39

На отдельную статью это вряд ли потянет. Суть в том, что по возможности не нужно привязываться к архитектуре App Engine. Мое приложение — это обычное WSGI-совместимое приложение на Flask, которое без проблем запустится под Апачем или Торнадо. Поэтому с переездом проблем не возникнет. Так же я практикую паттерны бекэндов, например, бекэнд для извлечения урлов. Он определяет, в какой среде запущено приложение — в GAЕ или нет — и в зависимости это этого вытягивает HTTP-запрос гугловским urlfetcher или стандартным urllib. Похожий паттерн можно применять для кеширования.

Stac Jul 22 2012 at 08:23

Поместите, пожалуйста, на сайте описание сервиса — что это и зачем.

Сервис полезный, но не прямо сейчас — добавлю в закладки.
А когда перейду туда из закладов (через месяцы или годы) пояснительной статьи на Хабре уже не будет перед глазами.

igrishaev Jul 22 2012 at 08:32

Конечно, текст будет. Возникли трудности с переводом на английский.

oleganisimov Jul 27 2012 at 13:07

Спасибо, Иван, интересный сервис. Я, правда, давно использую RSS самого твиттера. Google Reader добавляет поток даже без точного адреса потока, а просто по основному урлу микроблога.

Show the best of all time