«Да мы же святые!» — как бы говорят интернет-провайдеры. Иллюстрация из статьи The Register

Необычный судебный процесс начинается в американском штате Мэн. Четыре отраслевые группы интернет-провайдеров (ISP) подали коллективный иск (PDF) против генерального прокурора штата Мэн Аарона Фрея. Провайдеры требуют отмены поправок в статут штата Мэн от 6 июня 2019 года, поскольку эти поправки «налагают беспрецедентные и неоправданно обременительные ограничения на свободу слова интернет-провайдеров и только интернет-провайдеров». Суть в том, что новые нормы требуют от ISP спрашивать согласия пользователей на продажу их браузерной истории, то есть истории посещённых страниц и других действий в интернете. Это был традиционный источник дохода интернет-провайдеров, который может быть перекрыт.

Самое интересное, что в обоснование своих требований отраслевые ассоциации ACA Connects, CTIA, NCTA и USTelecom ссылаются на Первую поправку к Конституции США, которая гарантирует свободу слова.

30 марта 2007 года Санкт-Петербургское отделение Северо-Западного Телекома объявило о введении нового тарифа со скоростью доступа 56 Кбит/с (56 UP/56 DOWN). Подключиться на данный тарифный план возможно до 31.05.2007, ежемесячная плата составит 250 рублей без возможности использовать «пакетное предложение». Плата за подключение 1 рубль.

Весна. Снег начинает таять даже у нас в сибири. Потоки грязной воды начинают увеличиваться и ускоряться. Гугл решил не упустить своего шанса прогрессировать в ногу со временем, вместе с «Потоками», выкатив на рынок бету своего нового детища Google TiSP. Системы, предоставляющей беспроводное соединение в Сеть с помощью кабеля в канализации.

Гениально!

Давно известно, что интернет-провайдеры потихоньку, втайне от пользователей фильтруют трафик P2P-сетей. Наверняка, это происходит даже в России, хотя такие случаи ещё ни разу не обсуждались открыто, и общество не выработало свою оценку происходящему.

А вот в Америке обсуждение идёт полным ходом. Там уже не только добыли доказательства фильтрации, но начали изучать конкретные технические способы её осуществления. Например, недавно вскрылся интересный факт: оказывается, провайдер Comcast для борьбы с торрентами использует фальшивые пакеты TCP Reset (RST). Именно этот метод применяют китайские власти в работе Великого китайского файрвола.

Возникает вопрос: имеют ли провайдеры право подделывать трафик пользователей? Ведь фильтровать и блокировать пакеты — это одно, а подделка трафика — это совершенно другое. Технических администраторов компании-провайдера, менеджеров и даже руководство можно привлечь к уголовной ответственности за такое. С другой стороны — что им остаётся делать, если P2P-трафик составляет до 90% всего трафика в сетях передачи данных.

Сейчас много болтовни вокруг истории от «The London Times» под названием «Интернет пользователи будут заблокированы при нелегальных загрузках», появившейся также на сайте BBC под более тревожным заголовком «Нелегальные загрузчики встретятся с блокировкой в Британии»

Ряд российских провайдеров перекрыл своим пользователям доступ к сайту Компромaт.Ру

За последнюю неделю участились жалобы пользователей на проблемы с доступом к сайту. Выяснилось, что, в нарушение лицензии операторов, ряд российских первичных провайдеров перекрыл своим пользователям доступ к сайту Компромат.Ру. По чьему распоряжению это было сделано, пока неизвестно.

Во-первых, эти действия приводят к потере связности сетей связи общего пользования, что противоречит указанному в ст. 5 закона «О связи» принципу свободы передачи сообщений по сетям и средствам электросвязи на территории Российской Федерации.

Главный аргумент телекомов, которые хотят отменить принцип сетевой нейтральности, распределять трафик с разных сайтов по приоритету, а также ввести специальные виды тарификации и т.д. — неравномерное потребление трафика разными пользователями. Телекомы считают несправедливым, что пользователи платят одинаковую цену за неограниченный доступ к Сети, тогда как их фактическое потребление отличается в сотни и тысячи раз.

Пожалуй, это единственнный разумный аргумент телекомов. который действительно подтверждается реальными данными.

Технический директор американской компании Arbor Networks, разрабатывающей ПО для управления трафиком в сетях интернет-провайдеров, раскрыл секретную статистику. Оказывается, всего 10% пользователей потребляют 80% всего трафика в сетях интернет провайдеров, а самая активная часть 0,5% пользователей потребляет 40% всего трафика! При этом огромная часть пассивных потребителей потребляют в сумме менее 10% всего трафика.

«22.08.08 Авария на внешних каналах ОРЦ
В связи с аварией на волоконно-оптической линии связи Москва — Санкт-Петербург 22 августа 2008 года в 11:25 потеряна связность с некоторыми российскими и большинством зарубежных сетей.

Израильское отделение компании “Orange” разослало вчера своим клиентам письмо с необычайно занимательной новостью. В письме говорится о том, что в ближайшем будущем компания кроме услуг мобильной связи, начнет предоставлять кабельный интернет и телефонные линии. Помимо этого, клиентам предлагают оставить свои данные, чтобы представители компании могли перезвонить и сообщить в личном порядке о запуске этой программы.



Таким образом, подтвердились инсайдерские слухи, о которых я писал в августовской статье. Официальной информации для обычных клиентов, как вы видите, не так много, но зато можно сделать уже некоторые предварительные выводы… Во-первых, отныне на израильском рынке станет на одного провайдера больше. Речь идёт конечно же об интернет провайдере, компания “Orange” таким образом становится независимым ISP. Во-вторых, помимо предоставления интернет услуг, судя по письму, получена лицензия на кабельную телефонию. Как мне кажется, речь идёт о технологии VoIP (Voice over IP), которая успела набрать популярность в Израиле за последний год. В третьих, можно предположить, что компания захочет объединить свои услуги в один пакет и позволит за счет этого сэкономить некоторую сумму своим клиентам. Практически наверняка, компания будет предоставлять свои роутеры для беспроводной связи (такая ныне мода), в связи с чем возникает закономерный вопрос – «Будет ли прямая интеракция между сотовыми телефонами предоставляемыми компанией и ПК с помощью того же Wi-Fi?»

Напомню, что по результатам мартовских итогов, “Orange” держит в своих руках 32% рынка сотовых услуг и входит в тройку ведущих операторов сотовой связи Израиля. Также, хотелось бы упомянуть о том, что именно израильское отделение компании первым в Европе начало тестирование технологии 3.5G (HSDPA), в следствие чего израильтяне получили возможность серфить в интернете на высоких скоростях. Надеюсь, не менее кардинальные предложения «апельсиновая» компания сможет нам предложить вскоре и в плане интернет услуг. Во всяком случае, очень бы хотелось в это верить.

В любом случае, такой поворот событий должен немного встряхнуть израильский интернет рынок и подтолкнуть компании предоставляющие интернет услуги ускорить темпы разработки и тестирования анонсированных ранее технологий. Ведь как известно, конкуренция –лучший двигатель прогресса.

Оригинал, как обычно, на «Насладись!net».

В понедельник в Wall Street Journal, вышла статья о том, что Google предлагает крупнейшим ISP в мире устанавливать непосредственно у себя кеширующие сервера, которые будут отдавать контент Google.
Таким образом, по словам журнала, он сможет обеспечить более быструю отдачу своего контента в сравнении с другими сервисами и будет нарушаться принцип сетевой нейтральности, в соответствии с которым трафик от всех поставщиков информации должен обрабатываться с одинаковым приоритетом, не должно быть каналов первого и второго классов.
Многие контент-провайдеры, такие как Akamai или Limelight уже пользуются такими же средствами кеширования. Но важно помнить о том, что у этих провайдеров нет своего контента, поэтому они заинтересованы в том, чтобы все данные отдавались с одинаковым приоритетом. В случае с Google это не так и, теоретически, возможна ситуация, когда Picasa работает в 2 раза быстрее Flickr.

Но что имелось в виду с технической точки зрения? Как пишет Google в своём ответном посте, речь идёт только о внедрении регионального кеширования у крупных ISP. Эти услуги не будут эксклюзивными, и все желающие смогут ими воспользоваться. Так что пример о Picasa и Flickr не корректен потому, что Yahoo скорее всего тоже купит или построить свои решения по кешированию.

Но важным может быть то, что крупные компании начали более-менее массированно покупать услуги по региональному кешированию, и небольшим компаниям, как только они начнут выходить из фазы стартапов, придётся думать о покупке не только трафика, но и кешей.
Впрочем я не буду удивлён, если это происходит уже сейчас.

Возвращаясь к Google можно сказать о том, что скорость доставки информации к конечному потребителю является одним из наиболее важных частей их сервиса потому, что в интернет-поиске важно не только найти релевантные результаты, важно их быстро показать. Скорость показов важна и для рекламы. И компания уже долго работает над улучшением времени отклика, довольно заметно инвестируя в инфраструктуру (в 2006-2007 годах на капитальные расходы было потрачено 3,8 млрд USD), и внедрение средств кеширования можно считать простым развитием.

Как говорится в посте Google, кеширование реализуется в рамках проектов Google Global Cache и OpenEdge.

Во всей этой ситуации для меня интересно следующее:

1. Действительно ли есть сетевая нейтральность, и как её можно определить.
2. То, как вопросы, которые, казалось бы, имеют отношение только к IT, перетекают в обшечеловеческие. Например, когда создание кешей может быть воспринята как угроза свободе распространения информации.
3. Как не специалисты в IT видят нашу область и всё происходящее в ней

Постараюсь написать об этом в своих следующих постах.

Изначальная, довольно противоречивая, статья в Wall Street Journal: http://online.wsj.com/article/SB122929270127905065.html
Пост в Google Blog (все провайдеры делают это): http://googlepublicpolicy.blogspot.com/2008/12/net-neutrality-and-benefits-of-caching.html
Ответ на пост от Google с мыслью о том, что сетевая нейтральность в любом случае сдаёт позиции и Google просто первым начинает новую войну: http://gigaom.com/2008/12/14/google-turns-its-back-on-network-neutrality/
Комментарий в New York Times Bits Blog: bits.blogs.nytimes.com/2008/12/15/googles-treat-all-rich-companies-the-same-vision-of-net-neutrality/
Небольшое руководство по сетевой нейтральности от Google: http://www.google.com/help/netneutrality.html
Статья о том, что такое Edge Caching от 2001 года: http://findarticles.com/p/articles/mi_m0BRZ/is_1_21/ai_77057992

Update: Спасибо за карму, я снова могу править топики.

Все мы знаем, что DPI-решения операторы чаще всего покупают для урезания, а то и полной блокировки P2P-трафика (также, в Китае масштабно используется для «порчи» VoIP-трафика). Сюда же наши нелюбимые производители DPI-коробок привносят наличие кучи всяких «полезных» функций: вставка контекстной рекламы, приоритезация «нужного» и много чего ещё. Вообщем-то, придумать можно всё, что душе угодно, т.к. пакет можно анализировать полностью. Правда, с производительностью дела обстоят не так хорошо, как хотелось бы (сейчас существуют коробки с 2-мя 10G интерфейсами); здесь же можно ещё упомянуть качество определения тех же P2P-протоколов. В начале прошлого года EANTC пыталась провести тестирование DPI-систем. Причём, тестирование проводилось бесплатно для производителей оборудования — всё оплачивалось из кармана французской ассоциации звукозаписывающей/звукоохраняющей мафии. Результаты, мягко скажем, плохие :) 
    Ситуация получилась аналогична той, что есть на рынке антивирусов — протоколы P2P меняются/появляются новые, а производители DPI-систем выпускают сигнатуры для их определения. Например, взять всем известный протокол BitTorrent: если для передачи информации всегда использовался TCP, то теперь поддерживается и UDP, чем существенно усложнит жизнь dpi-коробкам + поддержка шифрования.
   Но рассказать я вам хотел не про это, а про систему кеширования P2P-контента, с которой мне уже удалось познакомиться: Oversi OverCache. Идея относительно проста: оператор устанавливает у себя кеширующие сервера и систему управления для них. 
  Система управления отвечает за:

• собирание статистики;
• управление контентом (выявление популярных ресурсов, удаленее старых непопулярных ресурсов);
• анонсирование доступности контента своим пирам (клиентам со всего адресного пространства оператора);
• управление кеш-серверами.

    Кеш-сервера раздают контент своим пирам. Причём, размещать сервера можно где угодно (по городам, по узлам и т.д.). 

    Как определяется популярный контент? Просто — для этого на систему управления надо зеркалировать (SPAN,TAP) исходящий к апстримам трафик (достаточно 30%), этот трафик анализируется (eDonkey2k-контент, обращения к torrent-трекерам, хеши файлов и т.д.). Плюс к этому можно добавить «локальный» поиск контента через DHT. Из этой информации уже можно выявить популярный контент, популярные трекеры и сделать какой-то threshold на кеширование/время жизни файлов. Дабы не нарваться на защитников копирайта — система не кеширует файлы полностью: для BitTorrent, к примеру, она не скачивает первый и последний блоки файла, что не позволяет стать системе seed'ом.
   Для flash-видео всё немного сложнее, помимо того, что мы должны перехватывать обращения к видео-сайтам (youtube тот же), мы ещё должны редиректить клиента на локальный кеш-сервер. Не знаю как у вас, а у меня жена и некоторые друзья регулярно смотрят фильмы, используя для этого ВКонтакте.Ру.
   По статистике эффективность решения до 80% процентов попадания в кеш. Бенефиты налицо: провайдер получает свободный аплинк-канал (а при наличии развитой системы кеширования и межрегиональные линки), клиенты получают ускоренную загрузку контента. Весь мир счастлив :)

Компания ESET (разработчик антивируса ESET NOD32) запускает новый сервис, который позволит абонентам интернет-провайдеров устанавливать антивирусное ПО ESET для домашних пользователей и самостоятельно решать, сколько платить за антивирус.



Концепция SaaS(Software-as-a service), о пользе и необходимости которой так много говорили большевики IT-монстры во главе с Гуглом, актуальна и для антивирусного сообщества. Практически все лидеры рынка и в России, и за рубежом, активно развивают данное направление, и понять их можно: виртуализация продаж, переход к предоставлению услуги, а не продукта, влечет за собой, как минимум, сокращение логистических издержек.

На Тайване принято новое законодательство, в котором детально прописаны санкции для пользователей P2P-сетей. Одновременно в стране запускается массированная рекламная кампания на ТВ, разъясняющая проблему пиратства для общества.

По новому закону с провайдеров снимают всякую ответственность за распространение контрафакта в их сетях, но они теперь должны отслеживать действия пользователей и применять правило трёх предупреждений в отношении юзеров, замеченных в незаконной активности. После третьего предупреждения ISP должен ограничить доступ в интернет провинившегося пользователя — снизить скорость входящего/исходящего канала или полностью отключить его от Сети. По идее, это правило нацелено на оперативное отключение активных сидеров, не дожидаясь бюрократических процедур.

Пока не совсем понятно, обязаны ли провайдеры передавать персональные детали нарушителей корпорациям-правообладателям для судебных разбирательств. В законе это не прописано напрямую. Судя по всему, такое возможно только в том случае, если пользователь подаст официальный протест на действия провайдера, то есть сам инициирует судебное разбирательство.

Аналогичный подход (снятие ответственности с ISP и правило трёх предупреждений для юзеров) сейчас рассматривается для принятия в нескольких других странах, в том числе во Франции, хотя там оно уже вызвало жёсткое неприятие со стороны общественности.

В этой статье мы не будем вдаваться в технические подробности организации Ethernet-провайдера, а остановимся исключительно на юридических моментах его деятельности и стоимости оформления необходимых бумаг. Процесс организации бизнеса Ethernet-провайдера можно разделить на следующие части:

1. Регистрация ООО, открытие счета в банке
2. Получение лицензий связи
3. Проектирование узла связи
4. Строительство узла связи
5. Сдача узла связи в эксплуатацию.

Рассмотрим подробнее по пунктам

Многие задаются вопросом как устроена сеть провайдера или как им самим строить сеть, в данной статье я покажу как спроектирована и работает сеть у меня, на логическом уровне. Хотя не считаю свою структуру за идеальную, можно было сделать и лучше, но это мое имхо :) ибо истина “спроси у 2-х провайдеров как строить сеть – получишь 3 разных варианта “

Теперь подробнее о том как это работает

Существует множество типов сетей с различным устройством и принципами идентификации пользователей для подсчета трафика, нарезки тарифных скоростей и ограничения доступа в сеть неплательщикам.
У каждого из вариантов есть свои особенности и свои недостатки
В этой статье я постараюсь рассказать о наиболее используемых методах идентификации пользователей которые успешно применяются в сетях небольших и крупных провайдерах

Всем привет. Много прочел про создание собственного ISP, но везде пишут либо о начальном этапе сбора документов и прочей бумажной волокиты, либо описывают в общих чертах. Примеры на хабре тут и тут

Каждая новая задача начинается с выбора инструментов, с помощью которых она будет реализована. И от того, насколько верно они выбраны зависит её win или fail. Мне довелось присоединиться к проекту с базовым языком программирования, весьма необычным и редкоиспользуемым. И это отнюдь не мешало его становлению и текущему успешному развитию. О чём это я?

В свете последних постов Идеальная техническая поддержка — сон или реальность? и ему подобных (про линчеванее еще был) смотря на коментари нормальному здоровому человеку нельзя не проникнуться ненавистью. Собственно ее я и буду излучать в этом тексте :)
Особенно впечатляют бури негодования по поводу работы техподдержки.



Привожу особо бросившиеся в глаза ситуации:

1. Мы купили железку по цене бутылки хорошей водки которая должна исполнять функции роутера и она не работает либо работает коряво? Виноват провайдер!
2. Мы настолько круты что поставили убунту либо еще какой-то ширпотребный дистрибутив и мальчики с перфоратором осуществляющие подключение не горят желанием сделать ifconfig чтобы посмотреть MAC абонента? Аяяй какой плохой провайдер!
3. Вирусы скушали Нашу винду и кроме ICMP по интерфейсу ничего не ходит? Конечно же плохая поддержка не желающая лечить вирусы по телефону и исцелять своей карму пользователя дистанционно!
4. Мы ВНЕЗАПНО отключили сетевую карточку и негодуем что мальчик пришедший через пол города пешком требует $1.25/ 10 гривен / 38 рублей за вызов? Обдираловка и провайдерский беспредел!
5. Мы намеряли (как?) слишком мало скорости до Новой Гвинеи — где наш обещанный мегабит за 30 гривен / 100 рублей? Провайдер нас держит за дураков!
6. ВНЕЗАПНО со счета испарилось гиг траффика в денежном еквиваленте? Мы же ничего не качали! Мы всего лишь слушали музычку вконтактике, смотрели видео на ютубе, разговари с родственниками по скайпу и рассматривали тетенек на разных сайтиках. Но мы ничего не качали за что с нас сняли деньги? Провайдер нас обкрадывает!

Вам уже смешно? Может грустно?
Мне грустно – давайте погрустим вместе.