Интернет 2009 в цифрах и фактах

[spyfzm]

Меня немного смущает 19% «других» веб-серверов. Просто не верится что существует множество альтернативных веб-серверов, имеющие в отдельности доли менее, чем у Lighttpd, но в сумме имеющие одну пятую часть рынка.

[pilsen]

действительно, сам я об этом не подумал. сейчас поищу еще инфу

[Helsus]

Наверное просто в ответе суют другое, своё название.

[spyfzm]

Доменное имя сайта если только, и то по ошибке… =)

[crash]

наверное параноики с собственными баннерами сервисов

[sunnybear]

никто не запрещает свои сборки Apache использовать. Провайдеры как только не извращаются :)

[Mad_Fish]

Недавно один очень перспективный проект обнаружил. Вообще странно, что он так мало известен. Называется Cherokee.

Авторы приводят результаты бенчмарков, в которых оно быстрее nginx (я сам пока не проверял). А ещё там очень приятная веб-админка.

[INIT]

интересно почему его тогд никто не использует?
лет ему ого сколько

[Mad_Fish]

Наверное потому, что его не пиарят никак. Я вообще о нём узнал, увидев в списке обновлённых пакетов (Recent Updates) на archlinux.org. По названию догадался, что это веб-сервер (апачи, чероки, ну понятно же), пошёл смотреть на официальный сайт — оказалось очень интересная штука.

То, что проект слабоизвестен, не значит, что он плохой.

[ProRunner]

На хабре был про него топик.

[kai]

Год-полтора назад он был в состоянии клинической разработки. Новые версии появлялись раз в две недели, глюки и новые возможности добавлялись и исправлялись пачками. Причем там была неудачная (имхо) структура конфигов, потому-что обновление пыталось затереть старые конфиги с настройками. Это меня остановило.

[pilsen]

да, всё возможно,

Zeus, Xitami, Sun, Jigsaw — эти товарищи 100% не могут держать 19% рынка.

[agh]

Когда Сысоев закончит создание nginx, возьмётся ли он за создание бэкэенда вроде апачи? :))

[sunnybear]

он закончит? :) по-моему, вся прелесть именно в процессе

[esc]

Че за бред? 502 это нарушенная связь с бэкендом, у любого сервера такое будет. Настроить нормально надо.

[esc]

Руки просто ровнять надо.

[romx]

Только если отобрать :)

[reaferon]

>>Общее число доменов (в зонах первого уровня) – 187 миллиардов
Может быть всё-таки второго уровня? Насчёт первого точную цифру не могу сказать, но навряд ли больше 500.

[pilsen]

Мне кажется, Вы не совсем правы.

com/net/org — домены первого уровня. Я назвал их зонами.

В то же время website.com/website.net/website.org — это уже домены 2ого уровня.
Речь шла о том, что в зонах первого уровня — находится 187 млрд доменов. а они уже (эти самые 187 млрд), сами по себе, являются доменами 2ого уровня.

Но замечание резонное, сейчас перефразирую, что бы не вводить людей в заблуждение.

[akho]

Еще это не миллиарды, а миллионы.

Вы сами-то подумайте.

[pilsen]

Да, да. Точно.

Ошибся я. Спасибо большое

[reaferon]

Ну да, здесь скорее игра слов.
Но всё-таки замечу оффтопом, что
com, net, org, ru etc — это домены первого уровня
google.com, php.net, wikipediia.org, yandex.ru — домены второго уровня.
Вдруг кто не курсе :)

[highw]

Каким образом собиралась статистика?

[sunnybear]

ответы сервера?

[highw]

Допустим, но а про записи А, или количество писем? или про язык сайта…

[sunnybear]

языка сайта сложно определить? Если через pingdom тысячи и десятки тысяч сайтов в день проходят, то статистику собрать легко.

В принципе, так же можно делать и с записями A-типа, но там кэш получается, т.е. часть данных не актуальна.

Про количество писем на знаю.

[pilsen]

Про количество писем (методику подсчета) сейчас ничего сказать не могу.

Вот оригинал (источник)
www.radicati.com/?p=3237

[pilsen]

Язык сайта — анализ языка главной страницы сайтов. Если сайт мультиязычный — учитывается лишь языковая версия главной страницы. Язык определяется через Google API.
Количество сайтов, принимавших участие в анализе, могу уточнить.

[pilsen]

Язык сайта — анализ языка главной страницы сайтов. Если сайт мультиязычный — учитывается лишь языковая версия главной страницы. Язык определяется через Google API.
Количество сайтов, принимавших участие в анализе, могу уточнить.

[pilsen]

Уточните, какая именно?

По веб серверам — данные с последнего отчета c netcraft.com. Методики их подсчета я не знаю, если нужно — могу поискать на их сайте, но не уверен, что они эти данные афишируют.
Я для себя эти данные вытягиваю посылая на 80й порт «HEAD / HTTP/1.1 \n\n»
ответ нужно парсить по маске:
Server: (.*)

По айпи адресам — webboar.com берет данные запросами к НСам не предмет наличия хотя бы одной А записи.

[Murlakatam]

Pingdom является сервисом по мониторингу доступности сайтов. Очевидно, что большинство его клиентов это американские компании, тогда становиться понятно почему большинство сайтов на инлише в то время как большинство юзеров из Азии.

[3ds]

Хмм странно, на 1й диаграмме — IIS — 21%, Google GFE — 6% а доли одинаковые, хотя тот же nginx — 6.9% а доля меньше чем у Google GFE ))

[gxcreator]

Вы ошиблись с цветами. ISS-21% Other-19%

[gxcreator]

*IIS конечно же.

[3ds]

Извиняюсь, был не прав.

[maeris]

>> Общее число доменов (в зонах первого уровня) – 187 миллиардов
>> Последний факт не совсем корректен, потому что из 187 млн.…

Да вы уж определитесь, миллионов или миллиардов. И да, ссылку на источник в студию.

[pilsen]

:)
принято.

[pilsen]

источник
www.verisign.com/domain-name-services/domain-information-center/domain-name-resources/domain-name-report-dec09.pdf

[xtender]

По 27 с половиной доменов на человека…

[xtender]

Кстати, интересно было бы узнать сколько их удаляется за год.

[pilsen]

Можно прикинуть:

По данным premiumdrops.com, каждый день удаляется примерно 90к доменов в зонах
com net org info us biz.
Эти домены составляют примерно половину от общего числа, итого в сумме получим 150-200к в день удалённых доменов.
Это лишь прикидки, я допускаю, что домены в зоне «инфо» чаще удаляются через год после регистрации, так как их (из-за их низкой цены) часто берут под «чернуху».

[grokinn]

вывод простой — надо срочно учить китайский язык — там явно огромный и совершенно ненасыщенный рынок. конечно платежеспособность в расчете на человека там значительно ниже чем в сша, но масса оправдывает усилия.

[Gregory]

там же своих умельцев хватает

[Kapatskiy]

Пофиг на рентабельность, зато смотрите какие обороты? ))

[xtender]

А та голодающая часть населения, которая сидит в интернете, это не обедающие программисты и админы? :)

[pilsen]

;)

Эта цифра отношения к теме статьи, безусловно, не имеет.
Дело в том, что я где-то слышал, что 80% населения планеты голодает.

Когда я сел за эту статью, понял, что это невозможно, ведь 25% населения имеет доступ к Сети (не платят же эти люди за инет хлебом и водой), вот и начал гуглить — сколько же процентов населения голодает. Так на эту цифру и наткнулся («голодает на планете каждый шестой житель»).

[xtender]

Спасибо, а я так живо себе представил как я голодный сижу и кодю… :)

[FladeX]

80% голодающих не может быть — в Китае сейчас экономический бум, так что там точно не голодают, а это уже солидный процент в статистике сытых и голодных :)

[pilsen]

Да, верно.
Кстати, в прошлом году читал, что по количеству пользователей интернет Китай обогнал Штаты

[sadmin]

>>уже никого не удивишь оптическим интернетом дома с каналом в 100 мегабит
ну знаете, в областном городе Курске такая скорость достойна удивления

[pilsen]

я вообще-то живу в городе с населением в 200к.

прошу прощения, если переборщил с оценкой «удивишь», «не увидишь»

[Centro]

Да и в Штатах, к примеру, канал в 100 мегабит есть не везде.

[Gumanoid]

Вообще-то, я и в Москве не часто видел, чтобы в квартиру подводилось оптоволокно…

[pilsen]

Прицепились :)
Ладно, я не прав, товарищи. Перегнул палку.

В нашем городке этой практикуется довольно часто (насколько мне известно — уже не менее 3 лет). Кабель заходит распределительный щит, а оттуда идёт уже через какой-то девайс в «розетки» под rg45.

[Gumanoid]

Ну это понятно, просто «оптический интернет» звучит будто оптоволокно используется для подведения интернета прямо к компу, а не где-то там у провайдера )

[pilsen]

Я имею в виду, что оптоволоконный кабель заходит _в квартиру_ (не просто к дому) и там (в квартире) уже делится по розеткам.

Есть альтернативные решения с каналом 100 мбит, к примеру — передача данных через телевизионный кабель. Заявленная скорость так же доходит до 100 мбит.

[Gumanoid]

Ну тогда это действительно круто :) Не встречал таких провайдеров. Если кто подключён таким образом, напишите тут.

[konfuze]

В России ещё долго такого не будет, в Европе же fttx более распространено.

[turbo_exe]

gpon очень популярен в норвегии, к примеру :)

[ilyak]

А как, интересно, считалось количество пользователей? Ведь у многих по 2-3 точки выхода (домашний и с телефона), а кто-то пользуется одним подключением на всю семью…

[pilsen]

я приведу ссылку на источник
www.internetworldstats.com/stats.htm

они, в свою очередь, ссылаются на

[pilsen]

они, в свою очередь, ссылаются на
en-us.nielsen.com/tab/product_families/nielsen_netratings

если Вам интересно — можете попытаться там найти описание методики подсчёта.

Я думаю, данные просто обобщили, зная, какой процент пользователей пользуется 2, 3 и т.д. точками входа в сеть.

[nairagnihton]

>> Общее число доменов (в зонах первого уровня) – 187 миллиардов
…
>>Последний факт не совсем корректен, потому что из 187 млн., лишь 131 млн доменов имеют IP

187 миллиардов или миллионов? Наверно миллионов, а то не получается, что «на каждый айпи адрес приходится немногим более 37 доменов».

[pilsen]

блин, всё Вы верно сказали.

Вы уже 2й человек, кто мне об этом говорит, а я только что «допёр». Уже исправил, спасибо большое!

[flashnik]

Рынок веб-серверов — это число сайтов, использующих такой веб-сервер, или число экземпляров такого веб-сервера, стоящих на фронтенде? Т.е. как учитываются такие случаи:
1) Крупный сайт с кучей машин на фронтенде
2) Nginx на фронтенде, а за ним еще Апач (например)
?

[pilsen]

Не могу ответить.
Допускаю, что для (2) статистика учитывает только одного из них. И это, наверняка, Апач.

[flashnik]

— Штурман, приборы?
— 200!
— Что 200? 200 чего?
— А что «приборы»?

Тяжело анализировать графики, не зная, что означают цифры. отложенные по осям.

Например, что означает доля в 6% у GFE? Это показатель числа серверов у гугла или сайтов, размещенных на AppEngine? Ответ на этот вопрос зависит от ответов на мой вопрос уровнем выше.

[xtender]

Ну кол-во серверов на бэк-энде не посчитаешь, а да и кто на фронт-энде можно посчитать только если на тот запрос, которым подсчитывали, отвечал фронт-энд без участия бэкэнда(например, как обычно статику отдают nginx'ом на фронтэнде или 500-е ошибки)

[flashnik]

Это зависит от методики. Я вполне допускаю, что крупная компания-аналитик a-la Nielsen могла связаться с крупными игроками, ощутимо влияющими на цифры, для внесения точных данных.
Потому и вопрос был о том, что означают цифры и какова методика их получения.

[xtender]

Судя по примеру на news.netcraft.com/active-sites.html предполагаю, что все-таки учитывается только поле Server в хэдере.

[flashnik]

Ради интереса выявления предпочтений хабровчан и возможности учета как фронтенда, так и бэкенда, сделал свой опрос

[pilsen]

Еще интересней посмотреть на статистику 2001-2006ого годов и сравнить в сегодняшними цифрами
netstat.ru/
Сколько же все-таки появилось новых игроков на рынке.

Я еще подумал вот о чем — часто на одном сервере стоит и nginx и apache. Думаю, для таких серверов статистика учитывает только одного из них.

[paz]

Интересно бы посмотреть что крутится на IIS а что на Апаче…

[paz]

Мне кажется что хоумпейджей и блогов на IIS поменьше

[Penguin_ru]

«Что же до Всегалактической переписи, то она, как это у нас заведено, съела кучу денег и не сообщила никому ничего нового — кроме того факта, что на каждого жителя Галактики приходится в среднем две целых четыре десятых ноги и по одной одомашненной гиене.» (с) Д.А.

[abulkhairov]

Автор, а можно пруфлинк, что число приложений на Facebook перевалило за 500 000?
Вот мой пруфлинк
Там сейчас 7449 приложений трекаются. Или, быть может, есть еще какая статистика?

[pilsen]

вопрос понял,

www.facebook.com/press/info.php?statistics

# More than 500,000 active applications currently on Facebook Platform

[abulkhairov]

Понял, спасибо.
значит на appdata.com трекаются только те, у которых более 1000 посетителей в месяц. Таких 7449.
Получается только 1.5% от этих 500 000 приложений с более, чем тысячной аудиторией в месяц всего (может я где-то не прав, поправьте, кто заметит баг). Интересная статистика.

[pilsen]

и Вам спасибо,

я понятия не имел, по какому принципу приложение попадает в appdata

[abulkhairov]

Вместе и открыли этот принцип, случайно )

[mishunika]

странно что nginx только 6.9%…

думаю что в эту статистику не учли серверы которые юзают и нжиникс и апач…

[pilsen]

тоже так считаю

[xtender]

Да это, наверное, и правильно, т.к. nginx, как фронт-энд, лишь прослойка, а то так каждый балансировщик и прокси-сервер нужно будет включать в статистику.

[savelhost]

Тут все просто… проверка идет все-же по фронтенду, НО… вот аудитория сайтов проверяемых говорит сама за себя.

Nginx используют больше всего в России и странах СНГ. В Штатах их все-же меньше.

То же самое с lighttpd.

Этот веб-сервер больше всего используется в Европе, что также сильно влияет на статистику не в положительную сторону для Lighttpd.

[impwx]

27.3 миллиона сообщений в день — это примерно три гигабайта информационного шума. ежедневно. ужас!

[ZyL]

>>лишь 252,908,000 – из Северной Америки
Вообще-то население Северной Америки (штаты + Канада + Мексика + остальное по мелочи) примерно 500 млн, так что и-нетом пользуется всего «лишь» каждый второй житель, включая грудных детей и стариков.

[Riateche]

Я, конечно, придираюсь, но могли бы потрудиться перевести числа в русский формат. Все эти запятые и точки не на своих местах режут глаз. А статистика интересная. Только почаще вспоминайте про тег <h5>, а то у вас топик какой-то не очень структурированный получился.

[pilsen]

запомню на будущее. спасибо

[shlomo]

чо такое google gfe, где скачать?

[rixaman]

ох уж эти цифры…

как там у Шарль де Голя?

Если ты съел две курицы, а я — ни одной, с точки зрения статистики каждый из нас съел по курице.

[Shemet]

>несёт на себе 50 различных веб-сайтов.

187000000 / 4.856.909 = 26,97188685231698
То есть около 27 различных веб-сайтов.

Вообще странно что у вас в расчетах цифра увеличилась. )

[pilsen]

спасибо )
подправил.

[litos]

Nginx сильно растет потому, что его большинство ставят как front-end перед apache для раздачи статического контента и проксирования, так как Apache из-за роста пользователей посещающих сайты «в одиночестве» уже не вывозит такие нагрузки без аппаратных апгрейдов.

[hypercom]

> больше женщин, чем мужчин (вот это и правда меня смутило)
На планете женщин больше, что же удивительного?

[aps]

На планете под названием China наоборот. Девочек там абортируют. Дисбаланс 10%
medportal.ru/mednovosti/news/2006/08/03/baby/

[Meneldor]

Простите за оффтопик… но куда смотреть в поисках $49 за аренду сервера :)? Спасибо!

[pilsen]

да куда угодно
amhost.net/dedicated.php?m=2
к примеру

[Meneldor]

Спасибо! Неужели это реально работает…

[pilsen]

а почему бы и нет?
работает и еще как.
но не говорил, что там делловские брендовые сервера стоят и канал 100 мегабит выделенный.

[Meneldor]

Да брендовость мне как раз сугубо фиолетова :), главное результат! Ещё раз спасибо, буду думать!!!

[pilsen]

сервера Делл своих денег стоят.

но если нагрузка невелика — действительно на это можно закрыть глаза

[Throwable]

Замечу, что диаграма не отражает реального положения вещей. Доля Apache увеличивается за счет того, что многие ставят его фронтендом перед другими серверами, например j2ee.

[ScREW]

Меня удивило в этих цифрах полное отсутствие Application Server-ов под платформу Java (Tomcat, Glassfish, JBoss, ...), при том, что под платформу .NET есть, и доля таких серверов достаточно высока. Неужели Sun так сильно слили?

Кроме того, меня удивляет, что IIS теряет долю. Казалось бы, что web-приложения становятся всё сложнее и сложнее, и писать их на платформе LAMP становится экономически не выгодно, но видимо, люди уходят с IIS именно на LAMP.

[pilsen]

вот еще данные,
www.webboar.com/webservers/
не совпадает с тем, что говорит pingdom, но я все-таки данным пингдома верю больше