Через 11 часов после старта, Google Chrome пользуются уже 1.18% интернетчиков по данным Net Applications, самого авторитетного провайдера статистики по браузерам. Доля Opera, по их же данным за август, 0.74%.

Для сравнения, доля беты IE8, вырастала максимум до 0.23%.

Данный график отражает количество активных коммитеров в OpenSource-проектах по статистике сайта Ohloh. Так же есть возможность сравнить количество коммитов, изменённых строк кода и проектов, но всё же именно эта мне кажется наиболее отражающей состояние индустрии. Давайте попробуем сделать некоторые выводы:

1. C/C++ постепенно утрачивают свои позиции. Хоть для таких проектов, как Apache HTTP Server, Linux Kernel, Open Office, Firefox, GCC другого варианта нет, давайте признаем, что и новых крупных «низкоуровневых» проектов не появляется, зато замены Desktop-приложениям в виде Web-аналогов наоборот растут.
2. Java стала новым лидером. Практически все проекты Apache, Eclipse, JBoss, Sun, а так же значительная доля на SourceForge написанны именно на ней.
3. Среди динамических языков в упадке Perl. Зато стабильный рост показывает Python, одно время его обгонял PHP, но теперь лидерство начинает переходить к JavaScript, который ещё прочнее укрепляет себя в Web(RIA), вытесняя остальные языки всё глубже на сервер.
4. Я уже писал о состоянии рынка Ruby-вакансий. Немного спал и кураж у OpenSource разработчиков на этом языке.
5. Несмотря на то, что по вакансиям C# находится в тройке лидеров наряду с C/C++ и Java, OpenSource среди разработчиков под .NET не сильно популярен, хоть рост и намечается в последнее время(в основном благодаря Mono и CodePlex).

Так уж получилось, что время от времени мне приходится работать со статистикой, а следовательно задаваться вопросом «В каком виде ее лучше представить другим людям?» Поэтому, сегодня я расскажу вам о некоторых весьма оригинальных способах визуализации разного рода статистических данных.

Для начала приведу пример одной визуализации, сделанной с помощью Processing.
В ее основу входит ежегодная статистика наиболее освещаемых газетой New York Times людей и организаций, а связи между ними показаны линиями.

По ссылке можно посмотреть визуализации за каждый год с 1984.

Каждый, кто поднимает проксю, потом хочет смотреть кто её пользуется, кто сколько качает. И иногда бывает очень полезным просмотр в режиме реального времени, кто что качает. В данном топике будут рассмотрены следующие программы:
SqStat — Real Time статистика через web
Sarg — Анализатор логов Squid с последующей генерации HTML
SquidView — Интерактивный консольный монитор логов Squid

Правильный real-time мониторинг системы, дело не такое простое, как может показаться на первый взгляд.

Самый распространенный пример — измерение времени отклика сервера на запрос. Допустим у нас всё есть:
— сервер для каждого запроса вычисляет execution time, складывает в счётчик
— сервер умеет отдавать значение счётчика по внешнему запросу
— есть monitoring сервер который собирает значения каждый poll interval, хранит, агрегирует и рисует графики

Решение в лоб — измерять мгновенное значение счётчика — особого смысла не имеет, при poll interval в одну или пять минут, мы получим мгновенное значение производительности системы измеренное по последнему запросу. Если все 5 минут до этого исполнялись запросы по 2секунды или больше, а последний был легкий на 20ms мы увидим только 20ms. Или наоборот.

Каждый месяц, Steam собирает данные о железе, которое используют их клиенты. Всю статистику можно посмотреть у них на сайте. Я думаю, данный материал будет особенно интересен не только game-developer'ам но и всем остальным.

Сразу видно превосходство Nvidia/Intel над Ati/Amd. У половины пользователей ширина канала больше 2Mbps(а говорите, нет за МКАДом жизни =). Поразительно, но GPU с поддержкой DirectX 10 есть почти у 70% пользователей, а реальных DX10 систем всего 29%. Но учитывая растущую популярность Windows 7 (уже 10% в стиме), это число может очень быстро измениться.

В общем, смотрите сами. Там все довольно подробно, и с удобной сортировкой.
p.s. Картинка кликабельна.

Вопрос номер 0 — зачем?

В посте про pnp4nagios я писал «Nagios/Pnp4Nagios не замена комплексу сбора статистики о состоянии системы». Почему я так думаю? Потому что 1) статистика состояния системы обширна и включает множество показателей 2) не всегда есть смысл их мониторить, точнее генерировать алерты. Например, знать сколько сколько операций ввода-вывода делает диск или происходит переключений контекста неплохо, но почти никогда не критично. Ну и кроме того, Nagios просто не предназначен для этого. В данной статье я не буду делать полное описание системы, ограничусь лишь особенно интересными, с моей точки зрения, моментами.

Вопрос номер 1 — почему collectd?

Основные моменты почему из Munin, Cacti и прочих я выбрал collectd:

1. Масштабируемость
2. Легковесность
3. Концепция — всё есть плагины
4. Сбор и запись данных разделены
5. Количество собираемых показателей
6. Расширяемость

В рамках проекта «Давайте сделаем интернет быстрее», Google опубликовал некоторые статистические данные о размере, количестве ресурсов и других показателях страниц во Всемирной паутине. Статистика была собрана из выборки в несколько миллиардов веб-страниц в процессе анализа и индексирования «движком» поискового гиганта.
При обработке этих страниц алгоритмом принимались во внимание не только основные html¬-страницы сайтов, но и производились попытки обнаружить и обработать остальные ресурсы, размещаемые на сайтах: таблицы стилей, скрипты и изображения.

В Froyo появился новый класс android.net.TrafficStats с функцией getUidRxBytes(int uid) и getUidTxBytes(int uid) который позволяет для каждого приложения получить объем отправленного/полученного трафика. Сразу родилась идея написать простенькую программу, мне кажется гугловцы это и имели ввиду когда делали эту функцию. Программа при вызове и раз в час обновляет значения, чтобы не потерять данные при перезагрузке, так же есть кнопка обновления для параноиков.

Очень полезная и простая программа, которая показывает сколько трафика используют различные программы. Показывает в каких приложениях больше всего расходуется трафик.

Уже много раз обсуждалась тема червя Stuxnet на Хабре. Казалось бы, осветили данное событие со всех сторон, однако все же много важных моментов осталось за кадром. Дело в том, что за всем этим «желтоватым» информационным шумом, фигурирующем сейчас в СМИ, не видно сути. А ведь до сих пор никто не может ответить точно на вопрос, зачем и кому могла быть выгодна такая атака. Прямых фактов не у кого нет, а фигурируют лишь домыслы, сделанные на довольно шатком фундаменте косвенных улик. Но давайте поговорим обо всем по порядку.

На конференции VB’2010, которая прошла в Ванкувере на прошлой неделе, очень много говорили об этой атаке, причем с разных ракурсов. Наиболее интересным по данной теме было выступление «An indepth look into Stuxnet» от исследователя из Symantec, Liam O'Murchu. В рамках его доклада была проведена любопытная демонстрация, которая показывала результат эксплуатации SCADA-системы.

График количества людей описанных в русской википедии по датам рождения и количество владельцев твиттер аккаунтов из их числа.

Приветствую!

В этой статье речь пойдет о новом модуле для nginx'а, цель которого — сбор и предоставление пользователю статистики обращений сервера к бэкендам. Под катом — подробности, примеры использования, скриншоты, ссылки, а также история создания.

Была опубликована статистика по продажам компьютеров (десктопов, ноутбуков и нетбуков) в четвертом квартале 2010-го от Gartner и IDC. Данные у двух компаний несколько различаются в числах, но сходятся в главном: по сравнению с аналогичным периодом 2010-го продажи компьютеров в США снизились на несколько процентов — и это при том, что экономика выбралась из кризиса. Главной причиной эксперты называют рост популярности планшетов: их не покупают как основное устройство, но в качестве второго-третьего устройства люди стали предпочитать их ноутбукам.
Эксперты также отмечают, что на корпоративном рынке при этом был рост — насколько понимаю, это означает, что падение на персональном рынке было гораздо большим, чем представленные усредненные цифры.

За пределами США планшеты еще не так популярны, и в целом продажи компьютеров немного возросли — однако меньше, чем можно было ожидать от выбравшегося из кризиса мира.

Учитывая, что ассортимент планшетов от известных фирм становится гораздо шире, в 2011-м ожидают усиления этого эффекта.

Буквально на днях Google предоставила возможность разработчикам получать ежемесячные отчеты об их продажах на Android Market. Отчеты включают в себя детализированную информацию о продажах (до отдельной трансакции), а также дополнительную: информация об устройстве, валюта продажи, текущий конверсионный курс. Кроме этого есть возможность полностью скачать отчеты в CSV-файле.



На текущий момент доступны отчеты за март этого года. Также обещается, что появятся отчеты за остальные месяцы до января 2010 года. Вообще, отчеты за предыдущий месяц будут появляться на десятое число каждого месяца. Со всеми вопросами и предложениями рекомендуется обращаться в Market Help Center.

Я видел очень много скриптов на разных языках, которые рассказали бы мне о том, как узнать о своих посетителях. Но они все были очень странные и местами требовали непонятных мне вещей.
В силу того, что всю жизнь писал на Perl'е, подумал что неплохо бы разобраться как дела обстоят с решением подобной задачи.
Сама по себе задача тривиальна и решение её просто. Особенно на PHP.
Но я PHP не люблю. А перл никогда не использовал для web.

Посему за вечер был накидан вот такой код:

Предисловие

Дамы и господа! Я хочу вам поведать историю, связанную с разработкой игры для BlackBerry OS. Все выводы в данном посту сделаны исключительно на основании собственного опыта и не являются аксиомой.

Здравствуйте. Я представляю одну из ведущих танцевальных онлайн-радиостанций в России — FreshBeat Radio.

У нас, как у интернет-радио, есть одно огромное преимущество перед FM вещанием. Нам не надо проводить дорогостоящие исследования рынка, чтобы узнать количество слушателей, их местоположение, длительность и частоту прослушивания.

Мы постоянно имеем доступ к огромному количеству статистических данных, которые можно и нужно использовать для того чтобы еще больше соответствовать своей целевой аудитории. Перед тем как проанализировать данные по слушателям, их нужно собрать и систематизировать так, чтобы с ними было удобно работать.

В этой статье, я расскажу вам о том, как это визуализировать и периодически обновлять с помощью Highstock. На Хабрахабре уже было несколько статей про этот набор инструментов, но все они описывали работу только со статическими данными.

Про Carberp мы уже писали ни раз, но тут опять граждане отличились интересной активностью. Во-первых, на прошлой неделе была замечена аналитиками из Trusteer интересная вещь, что с определенной конфигурацией Carberp стал вымогать деньги у зараженных пользователей за вход в Facebook.



И причем, очень настойчиво требовал оплату в размере 20 Euro через Ukash:



Были мысли, что быть может новая модификация какая, но нет, только специальный конфигурационный файл, содержащий инжекты для Facebook. Выглядит этот конфигурационный файл так:



Причем данная модификация не использовала буткит функционал, но могла устанавливать его по запросу. При анализе модуля внедряемого в системные процессы стало понятно, что код этой библиотеки практически идентичен той, которая поставлялась сразу с буткитом. Немного смутила нас эта Facebook- активность, ведь раньше большой любви к зарубежным сервисам и банкам Carberp не питал. Но тем не менее, ранее были замечены атаки на следующие зарубежные банки: Bank of America, CityBank, HSBC, CHASE, Nordea. Возможно это далеко не все, но по крайней мере то, что лично видели в конфигах, и запомнилось. После продолжения анализа ситуации возникла идея, а не изменил ли свой вектор распространения Carberp за последнее время. Вот статистика по обнаружениям в нашем регионе:



Как видно из вышеприведенных данных, пиковым месяцем в прошлом году был декабрь, но январь не сдает своих позиций (с учетом того, что данные приведены на начало этой недели). Видимо, связка Carberp + Blackhole по-прежнему очень эффективна. С точки зрения регионализации наш регион только усилил свою долю по количеству инцидентов:

Смешная статистика