На Хабре я недавно (чуть меньше месяца), до этого Хабр практически не читал. Пришёл, огляделся, походил по тематическим «хабам», почитал «Лучшее за всё время», просмотрел статьи отдельных, заинтересовавших меня персонажей и понял, что для того, чтобы получше понять, как живёт и чем дышит это замечательное сообщество, мне придётся Хабр распарсить и позадавать ему разные вопросы. К тому же, раз уж в своих статьях я писал в основном об автореферентности в разных её проявлениях, как не написать на Хабре статью о Хабре?
Посмотрю, интересно ли это всё кому-либо кроме меня. Если интересно, напишу ещё несколько постов, идей и материала для этого более чем достаточно.
Если я ничего не пропустил в интерфейсе сайта, единственные списки самых-самых, которые можно посмотреть — это общий рейтинг пользователей и список статей, т.н. «Лучшее за всё время». Оба списка отсортированы по рейтингу (пользователей и статей, соответственно). Между тем, существует ещё куча параметров, по которым было бы интересно всё отранжировать.
Самые «полезные» статьи. Статьи, которые максимальное кол-во читателей добавило в «избранное».
27+ ресурсов для онлайн-обучения / Хабрахабр
Памятка пользователям ssh / Хабрахабр
Жизнь разработчика (в картинках) / Хабрахабр
20 вещей, которые я должен был знать в 20 лет / Хабрахабр
Прекратите скручивать! / Хабрахабр
Подборка инструментов для фронт-энд разработки / Хабрахабр
Подборка полезного для любителей Twitter Bootstrap / Хабрахабр
Несколько полезных сервисов / Хабрахабр
Сети для самых маленьких. Часть нулевая. Планирование / Хабрахабр
Принцип цикады и почему он важен для веб-дизайнеров / Хабрахабр
Руководство по оформлению HTML/CSS кода от Google / Хабрахабр
Делаем приватный монитор из старого LCD монитора / Хабрахабр
Взломать Wi-Fi за 10 часов / Блог компании Журнал Хакер / Хабрахабр
Подборка инструментов для эффективной frontend разработки / Хабрахабр
Топ-5 самых впечатляющих книг, которые должен прочесть каждый разработчик ПО / Хабрахабр
Спать мало, но правильно? / Хабрахабр
Хочешь быть iOS разработчиком? Будь им! / Хабрахабр
Лекториум записал почти тысячу лекций за год / Хабрахабр
Онлайн-инструменты для кодеров / Хабрахабр
Ускорение загрузки Windows for fun and profit / Хабрахабр
Статьи, собравшие максимальное кол-во комментариев.
Как раздавать инвайты на Google+ / Хабрахабр
Hello, world! / Блог компании Тематические Медиа / Хабрахабр
Лучшие компьютерные игры всех времен и народов по версии хабрасообщества 2013 года / Хабрахабр
Раздача слонов или инвайты на Google+ / Хабрахабр
Ещё +2Гб для вашего DropBox аккаунта. На сей раз, промо-акция DropBox и Three.com.hk / Хабрахабр
Праздничная раздача инвайтов! / Хабрахабр
Первая версия Opera 15 для компьютеров / Блог компании Opera Software ASA / Хабрахабр
Инвайты на Google Wave / Хабрахабр
Зачем нужны попы в ВУЗе? / Хабрахабр
Чего вам не хватает для полного перехода с windows на linux? / Хабрахабр
Инвайты на Турбофильм! / Хабрахабр
Антивирус Бабушкина / Хабрахабр
Хабракамп / Хабрахабр
Demonoid.Com / Хабрахабр
О том, что сегодня произошло с «аськой» (часть 1-я) / Хабрахабр
Роскомнадзор признаёт хентай детским порно, призывает к подаче жалоб, обещает пополнение реестра запрещённых ресурсов в Интернете / Хабрахабр
300 миллионов пользователей и переход на WebKit / Блог компании Opera Software ASA / Хабрахабр
Какой язык программирования должен быть первым при изучении в школе? / Хабрахабр
Планируете ли вы навсегда уехать из России раньше 2017 года? / Хабрахабр
Апрельский фуршет / Хабрахабр
Антирейтинг. Худшее за всё время. Это тоже интересно. Это не скучные, неинтересные статьи, не получившие высокий рейтинг. Это статьи, нашедшие живейший отклик в умах и сердцах обитателей Хабра. Правда отрицательный.
Update. Большая часть «Антирейтинга» была убрана НЛО после публикации статьи, из 20 постов осталось 5:
Галерея безобразных скайп-аватар / Хабрахабр
Lostfilm закрыт / Хабрахабр
Мой гвоздь в крышку гроба Windows / Хабрахабр
«ВКонтакте все украл у Facebook»: надоевший миф / Хабрахабр
Оригинальный дизайн / Хабрахабр
Интересно было, есть ли на Хабре статьи с высоким рейтингом без единого отрицательного голоса. Что надо написать, чтобы ни у одного, даже самого злобного, тролля не поднялась лапка нажать на минус? Предположил, что без фотографий котят тут не обойтись. Ошибся.
Физика радиационных эффектов, влияющих на электронику в космосе / Хабрахабр
DNS Amplification (DNS усиление) / Хабрахабр
Headtracking или как увидеть трехмерный чайник на двухмерном мониторе / Хабрахабр
Обзор мозгокомпьютерного интерфейса Emotiv Epoc / Хабрахабр
Электронный поводырь для слепых «Электросонар» / Хабрахабр
Первое мероприятие по 3D печати в Нидерландах / Хабрахабр
Неизбежность нодокалипсиса / Хабрахабр
Обнаружение устойчивых признаков изображения: метод SURF / Хабрахабр
Изображения: форматы и сжатие (2/3) / Блог компании TradingView / Хабрахабр
CSRF на vkontakte.ru / Хабрахабр
Хемилюминесценция люминола / что внутри «светящихся палочек»? / Хабрахабр
Pionen — Подземный дата центр / Хабрахабр
Взлом хеш-функций (2004-2006 гг.): как это было и что теперь делать? / Хабрахабр
Миникомпьютер из роутера с OpenWRT: пишем драйвер фреймбуфера / Хабрахабр
Применение процедурных генераторов в создании контента для real-time 3D приложений: Часть 2. Valley Benchmark / Блог компании UNIGINE / Хабрахабр
Как работает беспилотный автомобиль «Гугла» / Хабрахабр
ZX-Art: крупнейшая коллекция графики для ZX-Spectrum / Хабрахабр
“DVD-Йон” затеял социальную сеть на пиратском контенте / Хабрахабр
Видеохостинг своими руками / Хабрахабр
Возвращаемся на раздачу или как сделать невозможное / Хабрахабр
На относительно небольшом кол-ве статей мой написаный на коленке парсер упал, я решил, что вышеприведённые списки это не сильно изменит. Потом пройду отдельно эти статьи и выложу все результаты как таблицу в формате csv, для самостоятельных изысканий читателей.
Мысли и идеи
1) Ещё несколько рейтингов вроде вышеприведённых
2) Нормализация рейтинга. Рейтинг статьи в 2006ом году совсем не то же самое, что аналогичный рейтинг в 2013ом. К сожалению, параметр «кол-во просмотров» был на Хабре не всегда, тут придётся что-нибудь изобретать, например учитывать кол-во пользователей, зарегестрированных на момент написания статьи. Ну и пересмотреть топ после такой нормализации.
3) Частотный словарь Хабра и сравнение его с другими частотными словарями, например Википедии. А так же интересно сравнить лексику статей с лексикой комментариев.
4) Использовать Хабр как материал для генератора марковских цепочек, автоматическая генерация «статей» и «комментариев».
5) Попробовать поучить какой-нибудь байесовский спам-фильтр отличать «хорошие» статьи от «плохих». В успехе подобного мероприятия сильно сомневаюсь, т.к. надеюсь, что для оценки имеет значение смысл статьи, а не только слова её составляющие. Но мало ли.
6) Корелляции всякие поискать. между всем и всем.
7) Восемь троллей — вымысел или реальность?
8) Самые-самые — это замечательно, а как насчёт «самые средние», что такое типичный пост на ХабраХабр?
9) Наименее интересно, но тоже можно сделать. Для любителей… гхм… помедитировать на рейтинг и карму. Что из себя представляют эти цифры? Какой процент статей имеет более высокий рейтинг чем моя замечательная статья? У какого процента пользователей карма длинее и толще чем у меня? Графики красивые можно нарисовать, разумеется. Ещё из той же серии — как будет выглядеть общий рейтинг, если те, кто в нём не участвуют (сотрудники Хабра) вдруг решат участвовать? Как будет выглядеть рейтинг, если убрать пессимизацию и начать учитывать былые заслуги?
P.S. Не уверен, что поставил в правильный хаб, но ничего более подходящего не нашёл.
Update.
Придумал ещё один, как мне кажется, интересный рейтинг. Посты вызвавшие самую неоднозначную реакцию сообщества:
Первый пост / Блог компании ВКонтакте / Хабрахабр
Дискриминация пользователей ВКонтакте / Хабрахабр
Почему упал Вконтакте / Хабрахабр
Пора завязывать использовать символы табуляции в коде / Блог компании PVS-Studio / Хабрахабр
И чтец, и на дуде игрец / Хабрахабр
Хабраохрана и культура речи / Хабрахабр
Прощай, карма или Кому нужен iPad? / Хабрахабр
Неюзабельные продукты от Apple / Хабрахабр
Бессмысленная «Операционная Система» / Хабрахабр
Чо! Мейл.ру. Чо? / Хабрахабр
Пепяка / Хабрахабр
Костюм лисички-Firefox [фото] / Хабрахабр
Давайте поговорим о Microsoft / Хабрахабр
OpenSource-курсач, или заставляем преподавателя выпасть в осадок / Хабрахабр
Почему я люблю Microsoft. Заметки зомби / Хабрахабр
Браузер Yandex / Блог компании Яндекс / Хабрахабр
Империя наносит ответный удар 2 / Хабрахабр
Merchant API / Блог компании ВКонтакте / Хабрахабр
Бог — бестолковый гейм-дизайнер / Хабрахабр
Почему я отказался от Mozilla Firefox / Хабрахабр
Вышел QIP для iPhone / Хабрахабр
Посмотрю, интересно ли это всё кому-либо кроме меня. Если интересно, напишу ещё несколько постов, идей и материала для этого более чем достаточно.
Если я ничего не пропустил в интерфейсе сайта, единственные списки самых-самых, которые можно посмотреть — это общий рейтинг пользователей и список статей, т.н. «Лучшее за всё время». Оба списка отсортированы по рейтингу (пользователей и статей, соответственно). Между тем, существует ещё куча параметров, по которым было бы интересно всё отранжировать.
Самые «полезные» статьи. Статьи, которые максимальное кол-во читателей добавило в «избранное».
27+ ресурсов для онлайн-обучения / Хабрахабр
Памятка пользователям ssh / Хабрахабр
Жизнь разработчика (в картинках) / Хабрахабр
20 вещей, которые я должен был знать в 20 лет / Хабрахабр
Прекратите скручивать! / Хабрахабр
Подборка инструментов для фронт-энд разработки / Хабрахабр
Подборка полезного для любителей Twitter Bootstrap / Хабрахабр
Несколько полезных сервисов / Хабрахабр
Сети для самых маленьких. Часть нулевая. Планирование / Хабрахабр
Принцип цикады и почему он важен для веб-дизайнеров / Хабрахабр
Руководство по оформлению HTML/CSS кода от Google / Хабрахабр
Делаем приватный монитор из старого LCD монитора / Хабрахабр
Взломать Wi-Fi за 10 часов / Блог компании Журнал Хакер / Хабрахабр
Подборка инструментов для эффективной frontend разработки / Хабрахабр
Топ-5 самых впечатляющих книг, которые должен прочесть каждый разработчик ПО / Хабрахабр
Спать мало, но правильно? / Хабрахабр
Хочешь быть iOS разработчиком? Будь им! / Хабрахабр
Лекториум записал почти тысячу лекций за год / Хабрахабр
Онлайн-инструменты для кодеров / Хабрахабр
Ускорение загрузки Windows for fun and profit / Хабрахабр
Статьи, собравшие максимальное кол-во комментариев.
Как раздавать инвайты на Google+ / Хабрахабр
Hello, world! / Блог компании Тематические Медиа / Хабрахабр
Лучшие компьютерные игры всех времен и народов по версии хабрасообщества 2013 года / Хабрахабр
Раздача слонов или инвайты на Google+ / Хабрахабр
Ещё +2Гб для вашего DropBox аккаунта. На сей раз, промо-акция DropBox и Three.com.hk / Хабрахабр
Праздничная раздача инвайтов! / Хабрахабр
Первая версия Opera 15 для компьютеров / Блог компании Opera Software ASA / Хабрахабр
Инвайты на Google Wave / Хабрахабр
Зачем нужны попы в ВУЗе? / Хабрахабр
Чего вам не хватает для полного перехода с windows на linux? / Хабрахабр
Инвайты на Турбофильм! / Хабрахабр
Антивирус Бабушкина / Хабрахабр
Хабракамп / Хабрахабр
Demonoid.Com / Хабрахабр
О том, что сегодня произошло с «аськой» (часть 1-я) / Хабрахабр
Роскомнадзор признаёт хентай детским порно, призывает к подаче жалоб, обещает пополнение реестра запрещённых ресурсов в Интернете / Хабрахабр
300 миллионов пользователей и переход на WebKit / Блог компании Opera Software ASA / Хабрахабр
Какой язык программирования должен быть первым при изучении в школе? / Хабрахабр
Планируете ли вы навсегда уехать из России раньше 2017 года? / Хабрахабр
Апрельский фуршет / Хабрахабр
Антирейтинг. Худшее за всё время. Это тоже интересно. Это не скучные, неинтересные статьи, не получившие высокий рейтинг. Это статьи, нашедшие живейший отклик в умах и сердцах обитателей Хабра. Правда отрицательный.
Update. Большая часть «Антирейтинга» была убрана НЛО после публикации статьи, из 20 постов осталось 5:
Галерея безобразных скайп-аватар / Хабрахабр
Lostfilm закрыт / Хабрахабр
Мой гвоздь в крышку гроба Windows / Хабрахабр
«ВКонтакте все украл у Facebook»: надоевший миф / Хабрахабр
Оригинальный дизайн / Хабрахабр
Интересно было, есть ли на Хабре статьи с высоким рейтингом без единого отрицательного голоса. Что надо написать, чтобы ни у одного, даже самого злобного, тролля не поднялась лапка нажать на минус? Предположил, что без фотографий котят тут не обойтись. Ошибся.
Физика радиационных эффектов, влияющих на электронику в космосе / Хабрахабр
DNS Amplification (DNS усиление) / Хабрахабр
Headtracking или как увидеть трехмерный чайник на двухмерном мониторе / Хабрахабр
Обзор мозгокомпьютерного интерфейса Emotiv Epoc / Хабрахабр
Электронный поводырь для слепых «Электросонар» / Хабрахабр
Первое мероприятие по 3D печати в Нидерландах / Хабрахабр
Неизбежность нодокалипсиса / Хабрахабр
Обнаружение устойчивых признаков изображения: метод SURF / Хабрахабр
Изображения: форматы и сжатие (2/3) / Блог компании TradingView / Хабрахабр
CSRF на vkontakte.ru / Хабрахабр
Хемилюминесценция люминола / что внутри «светящихся палочек»? / Хабрахабр
Pionen — Подземный дата центр / Хабрахабр
Взлом хеш-функций (2004-2006 гг.): как это было и что теперь делать? / Хабрахабр
Миникомпьютер из роутера с OpenWRT: пишем драйвер фреймбуфера / Хабрахабр
Применение процедурных генераторов в создании контента для real-time 3D приложений: Часть 2. Valley Benchmark / Блог компании UNIGINE / Хабрахабр
Как работает беспилотный автомобиль «Гугла» / Хабрахабр
ZX-Art: крупнейшая коллекция графики для ZX-Spectrum / Хабрахабр
“DVD-Йон” затеял социальную сеть на пиратском контенте / Хабрахабр
Видеохостинг своими руками / Хабрахабр
Возвращаемся на раздачу или как сделать невозможное / Хабрахабр
На относительно небольшом кол-ве статей мой написаный на коленке парсер упал, я решил, что вышеприведённые списки это не сильно изменит. Потом пройду отдельно эти статьи и выложу все результаты как таблицу в формате csv, для самостоятельных изысканий читателей.
Мысли и идеи
1) Ещё несколько рейтингов вроде вышеприведённых
2) Нормализация рейтинга. Рейтинг статьи в 2006ом году совсем не то же самое, что аналогичный рейтинг в 2013ом. К сожалению, параметр «кол-во просмотров» был на Хабре не всегда, тут придётся что-нибудь изобретать, например учитывать кол-во пользователей, зарегестрированных на момент написания статьи. Ну и пересмотреть топ после такой нормализации.
3) Частотный словарь Хабра и сравнение его с другими частотными словарями, например Википедии. А так же интересно сравнить лексику статей с лексикой комментариев.
4) Использовать Хабр как материал для генератора марковских цепочек, автоматическая генерация «статей» и «комментариев».
5) Попробовать поучить какой-нибудь байесовский спам-фильтр отличать «хорошие» статьи от «плохих». В успехе подобного мероприятия сильно сомневаюсь, т.к. надеюсь, что для оценки имеет значение смысл статьи, а не только слова её составляющие. Но мало ли.
6) Корелляции всякие поискать. между всем и всем.
7) Восемь троллей — вымысел или реальность?
8) Самые-самые — это замечательно, а как насчёт «самые средние», что такое типичный пост на ХабраХабр?
9) Наименее интересно, но тоже можно сделать. Для любителей… гхм… помедитировать на рейтинг и карму. Что из себя представляют эти цифры? Какой процент статей имеет более высокий рейтинг чем моя замечательная статья? У какого процента пользователей карма длинее и толще чем у меня? Графики красивые можно нарисовать, разумеется. Ещё из той же серии — как будет выглядеть общий рейтинг, если те, кто в нём не участвуют (сотрудники Хабра) вдруг решат участвовать? Как будет выглядеть рейтинг, если убрать пессимизацию и начать учитывать былые заслуги?
P.S. Не уверен, что поставил в правильный хаб, но ничего более подходящего не нашёл.
Update.
Придумал ещё один, как мне кажется, интересный рейтинг. Посты вызвавшие самую неоднозначную реакцию сообщества:
Первый пост / Блог компании ВКонтакте / Хабрахабр
Дискриминация пользователей ВКонтакте / Хабрахабр
Почему упал Вконтакте / Хабрахабр
Пора завязывать использовать символы табуляции в коде / Блог компании PVS-Studio / Хабрахабр
И чтец, и на дуде игрец / Хабрахабр
Хабраохрана и культура речи / Хабрахабр
Прощай, карма или Кому нужен iPad? / Хабрахабр
Неюзабельные продукты от Apple / Хабрахабр
Бессмысленная «Операционная Система» / Хабрахабр
Чо! Мейл.ру. Чо? / Хабрахабр
Пепяка / Хабрахабр
Костюм лисички-Firefox [фото] / Хабрахабр
Давайте поговорим о Microsoft / Хабрахабр
OpenSource-курсач, или заставляем преподавателя выпасть в осадок / Хабрахабр
Почему я люблю Microsoft. Заметки зомби / Хабрахабр
Браузер Yandex / Блог компании Яндекс / Хабрахабр
Империя наносит ответный удар 2 / Хабрахабр
Merchant API / Блог компании ВКонтакте / Хабрахабр
Бог — бестолковый гейм-дизайнер / Хабрахабр
Почему я отказался от Mozilla Firefox / Хабрахабр
Вышел QIP для iPhone / Хабрахабр