Собрал я тут своим вирусом статистику по применяемым типам блокировки сайтов на стороне провайдера.
Названия провайдеров могут оказаться неточными из-за того, что GeoIP-база от MaxMind применялась свежая, а вот GeoISP-базу свежую мне украсть не удалось, поэтому использовалась версия от сентября 2012 года. Из-за этого, иногда в базе можно встретить измерение из России, но провайдера, например, из Чехии. Впрочем, это не проблема.
Итак, некоторые данные:
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/d72/a5b/40f/d72a5b40f97f1546046d4f03766bb9ef.png)
Как видим, самым популярным городом России оказался "". В нем живут в 2.5 раза больше людей, чем в столице!
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/99c/1ca/b13/99c1cab137f96831078eab2a5fa9a20f.png)
DPI_IP — блокирование с использованием DPI, который проверяет блокируемый URL только на определенных IP и 80 порту.
DPI_FULL — блокирование с использованием DPI на всех IP и всех портах.
IP — блокирование по IP-адресу.
DNS_SPOOF — подделка A-записи от DNS-сервера.
DNS_REDIRECT — перенаправление DNS-запросов от не-провайдерских DNS-серверов на провайдерский.
DNS_BLOCK — блокирование не-провайдерских DNS-серверов.
Как мы можем видеть, у большинства пользователей провайдер использует DPI. На втором месте идет всеми нелюбимая блокировка по IP.
Тут важно отметить один момент: некоторые провайдеры блокируют некоторые сайты полностью, а некоторые пускают через DPI. Какое-то время, в утилите была проверка только через gelbooru.com, который оказался полностью заблокирован у некоторых пользователей. В результате это отображается как блокировка по IP, а не как DPI. Однако, если пользователь запускал утилиту более поздней версии (а есть основание полагать, что большинство пользователей это сделали), то можно считать измерение более-менее правдивым.
Совершенно непонятно для меня сочетание DPI и подмены А-записей, или перенаправления на свой DNS. Я не могу ответить на вопрос, кому в голову пришло так делать, и зачем.
Радует, что у приличного количества пользователей вообще не блокируются какие-либо сайты.
![image](https://habrastorage.org/r/w1560/getpro/habr/comment_images/7ff/6d2/c17/7ff6d2c1703c4e1b204d59e6aca2a97e.png)
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/e79/44e/d1c/e7944ed1cd2ec358215ceb1a90a12ea4.png)
У подавляющего большинства пользователей Ростелекома все еще блокировка по IP, однако, кое-где уже внедрили DPI на основе прокси-сервера.
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/f3e/93c/3fa/f3e93c3fa1ef57e7bbf016d4795a11d3.png)
Награда «Самый непонятный провайдер России» уходит в ЭР-Телеком.
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/213/b2b/2cf/213b2b2cf9a9d23202d15a10910ceee9.png)
DPI_FULL — это печально.
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/6e7/281/9dc/6e72819dc90ff79a69056c6ae8c5a62b.png)
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/a88/18a/8b6/a8818a8b63cf2f24d4957ebe7b4c352f.png)
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/9d8/8ce/ed5/9d88ceed5cb644ae3ff1d9e9ee3a73f8.png)
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/058/776/725/05877672559a1fe8d225488d211e27d7.png)
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/c1f/179/6a9/c1f1796a9dbb9b8ea107cc4236132df8.png)
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/f95/350/b32/f95350b32d2f2d322507105a62f5e0c7.png)
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/c67/1ed/c45/c671edc4534b8390b288882bf7f9189f.png)
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/be3/8b6/e13/be38b6e1304fa61beff9e929d0e2cac9.png)
![image](https://habrastorage.org/r/w1560/getpro/habr/post_images/2ef/519/103/2ef519103cf2031a1f048decbbdc5653.png)
Из базы будет составлена таблица на wiki.bloku.net вида провайдер→тип блокировки.
Был несколько удивлен, что в GeoIP City кириллическая «ё» заменяется на "ë" (LATIN SMALL LETTER E WITH DIAERESIS, U+00EB). Так, Приозёрск стал Priozërsk-ом, Киселёвск Kiselëvsk-ом, и так далее.
Названия провайдеров могут оказаться неточными из-за того, что GeoIP-база от MaxMind применялась свежая, а вот GeoISP-базу свежую мне украсть не удалось, поэтому использовалась версия от сентября 2012 года. Из-за этого, иногда в базе можно встретить измерение из России, но провайдера, например, из Чехии. Впрочем, это не проблема.
Итак, некоторые данные:
- 5076 уникальных (в плане IP, а не провайдера) измерения из РФ
- 815 провайдеров
- 315 городов
![image](https://habrastorage.org/getpro/habr/post_images/d72/a5b/40f/d72a5b40f97f1546046d4f03766bb9ef.png)
Как видим, самым популярным городом России оказался "". В нем живут в 2.5 раза больше людей, чем в столице!
![image](https://habrastorage.org/getpro/habr/post_images/99c/1ca/b13/99c1cab137f96831078eab2a5fa9a20f.png)
DPI_IP — блокирование с использованием DPI, который проверяет блокируемый URL только на определенных IP и 80 порту.
DPI_FULL — блокирование с использованием DPI на всех IP и всех портах.
IP — блокирование по IP-адресу.
DNS_SPOOF — подделка A-записи от DNS-сервера.
DNS_REDIRECT — перенаправление DNS-запросов от не-провайдерских DNS-серверов на провайдерский.
DNS_BLOCK — блокирование не-провайдерских DNS-серверов.
Как мы можем видеть, у большинства пользователей провайдер использует DPI. На втором месте идет всеми нелюбимая блокировка по IP.
Тут важно отметить один момент: некоторые провайдеры блокируют некоторые сайты полностью, а некоторые пускают через DPI. Какое-то время, в утилите была проверка только через gelbooru.com, который оказался полностью заблокирован у некоторых пользователей. В результате это отображается как блокировка по IP, а не как DPI. Однако, если пользователь запускал утилиту более поздней версии (а есть основание полагать, что большинство пользователей это сделали), то можно считать измерение более-менее правдивым.
Совершенно непонятно для меня сочетание DPI и подмены А-записей, или перенаправления на свой DNS. Я не могу ответить на вопрос, кому в голову пришло так делать, и зачем.
Радует, что у приличного количества пользователей вообще не блокируются какие-либо сайты.
![image](https://habrastorage.org/getpro/habr/comment_images/7ff/6d2/c17/7ff6d2c1703c4e1b204d59e6aca2a97e.png)
Типы блокировок по некоторым провайдерам
![image](https://habrastorage.org/getpro/habr/post_images/e79/44e/d1c/e7944ed1cd2ec358215ceb1a90a12ea4.png)
У подавляющего большинства пользователей Ростелекома все еще блокировка по IP, однако, кое-где уже внедрили DPI на основе прокси-сервера.
![image](https://habrastorage.org/getpro/habr/post_images/f3e/93c/3fa/f3e93c3fa1ef57e7bbf016d4795a11d3.png)
Награда «Самый непонятный провайдер России» уходит в ЭР-Телеком.
![image](https://habrastorage.org/getpro/habr/post_images/213/b2b/2cf/213b2b2cf9a9d23202d15a10910ceee9.png)
DPI_FULL — это печально.
![image](https://habrastorage.org/getpro/habr/post_images/6e7/281/9dc/6e72819dc90ff79a69056c6ae8c5a62b.png)
Типы блокировок по некоторым городам
![image](https://habrastorage.org/getpro/habr/post_images/a88/18a/8b6/a8818a8b63cf2f24d4957ebe7b4c352f.png)
![image](https://habrastorage.org/getpro/habr/post_images/9d8/8ce/ed5/9d88ceed5cb644ae3ff1d9e9ee3a73f8.png)
![image](https://habrastorage.org/getpro/habr/post_images/058/776/725/05877672559a1fe8d225488d211e27d7.png)
![image](https://habrastorage.org/getpro/habr/post_images/c1f/179/6a9/c1f1796a9dbb9b8ea107cc4236132df8.png)
![image](https://habrastorage.org/getpro/habr/post_images/f95/350/b32/f95350b32d2f2d322507105a62f5e0c7.png)
![image](https://habrastorage.org/getpro/habr/post_images/c67/1ed/c45/c671edc4534b8390b288882bf7f9189f.png)
![image](https://habrastorage.org/getpro/habr/post_images/be3/8b6/e13/be38b6e1304fa61beff9e929d0e2cac9.png)
![image](https://habrastorage.org/getpro/habr/post_images/2ef/519/103/2ef519103cf2031a1f048decbbdc5653.png)
Из базы будет составлена таблица на wiki.bloku.net вида провайдер→тип блокировки.
P.S.
Был несколько удивлен, что в GeoIP City кириллическая «ё» заменяется на "ë" (LATIN SMALL LETTER E WITH DIAERESIS, U+00EB). Так, Приозёрск стал Priozërsk-ом, Киселёвск Kiselëvsk-ом, и так далее.