АНБ не справляется с объёмами трафика

    Благодаря документам от Эдварда Сноудена стало известно о программах Агентства национальной безопасности США (АНБ) по тотальной прослушке интернет-трафика, в том числе о программе MUSCULAR по съёму трафика между дата-цетрами компаний Google и Yahoo по всему миру непосредственно через кабели оптоволоконной связи.

    Как теперь выяснилось, АНБ не справляется с обработкой слишком больших объёмов трафика, которые поступают в её систему, и в 2013 году агентство попросило уменьшить масштабы слежки по программе MUSCULAR.

    «Их нынешняя деятельность уменьшает работоспособность системы, когда они обрабатывают все эти данные», — сказал Уильям Бинни (William Binney), разработчик программного обеспечения, которое используется в АНБ, в интервью WSJ. По его словам, АНБ погрязло в массиве ненужной информации, которая мешает агентству осуществлять полезную работу по поиску потенциальных террористов.


    Уильям Бинни

    Неудивительно, что некоторые эксперты выражают мнение, что тотальная слежка за гражданами, в том числе сбор всех метаданных и анализ интернет-трафика, не помогла предотвратить ни единого террористического акта.

    Уильям Бинни практически неизвестен общественности, в отличие от Эдварда Сноудена. Тем не менее, он проработал в АНБ более 30 лет и его нынешние показания имеют не меньший вес, чем документы, опубликованные Сноуденом.

    Так или иначе, но АНБ решает проблему по-своему. Они считают, что для обработки возрастающих объёмов трафика нужно увеличивать вычислительные мощности и строить новые дата-центры. Например, сейчас в Юте заканчивается строительство гигантского дата-центра АНБ. Но вряд ли это сможет решить проблему, потому что трафик в интернете растёт слишком быстрыми темпами. Документы, опубликованные Эдвардом Сноуденом и датированные 2012-м годом, тоже свидетельствуют о том, что представители АНБ жалуются, что сбор метаданных с иностранных мобильных телефонов «превосходит наши возможности по его обработке и хранению».

    Как сказал Уильям Бинни, в ответ на жалобы о недостатке технических средств для обработки данных АНБ получило указание уменьшить объём слежки, не собирать информацию о всех гражданах, а сконцентрироваться на слежке за теми, кто «может представлять угрозу государству и его союзникам». Агентству рекомендовали разработать программное обеспечение для более «интеллектуальной» фильтрации собранных метаданных.

    Эдвард Сноуден и многие правозащитники говорили, что АНБ собирает слишком много информации, большая часть которой не нужна. Оказывается, что эта точка зрения подтверждается техническими ограничениями в самом АНБ.
    Поддержать автора
    Поделиться публикацией

    Комментарии 48

      +7
      В поддержку этой новости, приложу вот это интервью трех бывших сотрудников NSA, которые пытались донести эти сведения до внимания общественности в рамках закона, но потерпели неудачу. Там видео и текст.
        +47
        Больше котиков интернет, больше! И за нами перестанут следить!
          –12
          Лично за вами мы не следим.
            +12
            Простите, коллега, но вы ошибаетесь.
              +7
              АНБ Таджикистана?
                +4
                Да здравствует таджикское АНБ, самое гуманное АНБ в мире!
              +33
              Больше всего! А главное — больше шифрования! И пусть будет как в анекдоте:

              Отчитывается глава колхоза:
              — В прошлом году мы посеяли 100 га буряка и всё поел долгоносик.
              — В этом году мы посеяли 200 га буряка… И снова всё поел долгоносик.
              — В следующем году мы посеем 400 га! Пусть этот проклятый долгоносик удавится!

              Оригинал
              Звітує голова сільради:
              — Минулого року ми засіяли 100 га буряків і все з'їв довгоносик.
              — У цьому році ми засіяли 200 га… Знову все поїв довгоносик.
              — Наступного року ми засіємо 400 га! Хай той клятий довгоносик вдавиться!
                +1
                Ага, я после «лета откровений» включаю шифрование даже там, где это и не нужно казалось бы. По причине именно из этого анекдота.
                  0
                  Простите, но в оригинале «глава сельсовета» а не «колхоза». Соль ведь в том, кто так рассуждает.
                    0
                    При адаптации я принял решение, что сельсовет — нечто диковинно-неизведанное на просторах РФ, а колхоз — всем известное явление.
                    Поэтому, возможно, вы правы.
                      0
                      .
                    0
                    А собаки?
                    +52
                    Ждем корпаративный блог АНБ на хабре, интересно узнать какие технические решения позволяются обрабатывать столь большой объем трафика. Ну там какие ос, файловая система и пр.
                      +11
                      Да пусть на GitHub сразу кладут, сами разберемся, допилим.
                      0
                      Удивительно, сколько бесполезной информации типа тех же котиков им приходится обрабатывать, ради буквально мизерного количества действительно очень нужной информации. Это похлеще поиска иголки в стоге сена. И удивительно, что у них до сих пор нет алгоритмов, которые позволят существенно снизить количество просматриваемой информации.
                      Или же им действительно важно знать, кто кому каких котиков отправлял?
                        +1
                        Котики котикам рознь. Некоторые из них могут содержать важную информацию или переговоры террористов, замаскированные методами стеганографии.
                          0
                          Даешь криптографию с котиками?!
                        +7
                        удивительно, что у них до сих пор нет алгоритмов

                        То, что они создают огромные хранилища данных, никак не говорит о том, у них что нет алгоритмов для обработки. Это два совершенно разных вида деятельности, и очень маловероятно, что спецслужбы исходят из соображений оптимизации этих процессов — им нужно тратить миллиарды долларов налогоплательщиков, так, чтобы в следующие бюджеты эти миллиарды только росли, а с этим бизнес-процессом они вполне справляются.

                        Собственно, весь скандал со Сноуденом, и вся эта волна статей и интервью — результат того, что широкая общественность (в данном случае — американская) очень озабочена тратами огромных бюджетных средств. Часто слышу мнение типа «вот американцы, какие-то глупые — неужели не знали что АНБ ведет слежку, бла-бла-бла», так вот вопрос не совсем в какой-то там слежке (безусловно, аспект личной свободы есть в этом вопросе), а в том, что там в процессе сбора и обработки информации тратятся поистине гигантские средства, в то время, как в других секторах бюджета что-то пошло не так.

                        Что касается котиков — да.
                          +3
                          Кстати, интересное мнение. Мне казалось, что все-таки общественность озабочена скорее слежкой. Ведь траты хоть и большие, но совсем не сравнятся с тратами на какую-нибудь Афганскую или Иракскую кампании, которые проводились почти с теми же антитеррористическими целями. Конечно, и тогда было много недовольных, но сейчас уровень недовольства намного выше. Во всяком случае, у меня сложилось такое ощущение.
                            +2
                            Озабочена, вы правы. Но народу «политически выгоднее» разговаривать со властью на языке денег, мол, «куда ты, власть, тратишь наши налоги», а все ограничения свобод, это скорее политический капитал в дебатах между заинтересованными в собственно политике. Но не знаю, я сужу по своим наблюдениям в обсуждениях, там где бываю, и не могу гарантировать, что эти сведения верны на 100%, но впечатление сложилось именно такое.
                              +2
                              К слову некоторые службы пополняют дефицит бюджета совсем не всегда из фондов государства. Например службы могут заниматься контробандой или нелегальными операциями за рубежом, полиция — неоффициальной реализацией вещ. доков в виде наркотиков и оружия, и тд. особенно осуществляя подкуп информаторов.

                              Контро ль за расходом средств — безусловно хорош и нужен, но перегнете с ним и у людей инициативных и находчивых инициатива и находчивость пойдет не туда, куда вы ожидаете.
                                0
                                некоторые службы пополняют дефицит бюджета совсем не всегда из фондов государства

                                Это спойлер сразу нескольким прекрасным сериалам! Что касается:
                                у людей инициативных и находчивых инициатива и находчивость пойдет не туда

                                Тут наверно, не всегда полезен подход в рамках «чем бы дитя не тешилось, лишь бы не...», политика невмшательства — тоже всегда палка двусторонняя.
                              +3
                              image
                              +1
                              Ну так скажем экономией средств задумались не только в отношении разведки. Все отрасли и медицина, и военные, и соц. обеспечение — все отрасли в США очень мало отличаются экономностью. Думается такой шум сейчас как раз своевременен для урезания бюджетов, но это как всегда палка о двух концах. Уменьшая гос. заказ — уменьшаем по цепочке всю экономику…
                                0
                                Ох, я не пытался создать дискуссию на тему устройства американской политической машины. Согласен, с тем что вы сказали, примерно это я и имел в виду — люди быстрее замечают не нарушение конституционных прав, а провалы там, где близко — социальщину, медицину, а военно-патриотические игры, естественно, идут следом, под вопросом «а куда делись деньги то».
                              +12
                              Бедняга не выдерживает, тем более, что на праздники, видимо, пришлось отпустить.
                              • НЛО прилетело и опубликовало эту надпись здесь
                                  +1
                                  Кстати, наверняка и найдутся те, кто поддержит. Хорошая мысль. Надо на кикстартере начть сбор средств под это :).
                                    +3
                                    Так вроде BOINC и сейчас работает, или я что-то пропустил.
                                    А что касается АНБ — так, возможно, именно оно распространяет ботнет чтобы майнить биткоины на благо государственного бюджета?
                                      +1
                                      Берите выше. Может биткоины — это и есть продукт АНБ? Ещё один инструмент управления мировой экономикой ;)
                                      0
                                      Я одно время участвовал в Folding@home. Обычно приходило задание с описанием того, что собственно считается и контактами ученого, поставившего эту задачу. Так вот где-то с год назад стали приходить задания без описаний и фамилий. Я пару посчитал и забил.
                                      Скорее всего в BOINC какой-то баг просто, но черт его знает.
                                        0
                                        > Так вот где-то с год назад стали приходить задания без описаний и фамилий
                                        Если бы я знал, что читаю не хабр, а научно-фантастический роман, я бы понял, что это как раз то место, где уже пора холодку по спине пробежаться.
                                      +17
                                      Мне кажется, проблема большого объема данных может быть решена методами стандартизации. Например, есть RFC 3514, где описан так называемый «Evil bit» в IP-заголовке. Программное обеспечение, предназначенное для атак, вирусы и т.д. должны устанавливать этот бит в «1» в целях облегчения фильтрации. Можно было бы распространить эту концепцию на протоколы более высокого уровня, установить обязательное требование для всех коммуникационных программ, используемых террористами, устанавливать какой-нибудь флаг-признак в рамках используемого протокола. Тогда бы и задача слежки АНБ упростилась: нужно было бы перехватывать только тот траффик, который содержит эти флаги.
                                        –2
                                        Те, кто составлял этот RFC, либо наивные, либо просто упоротые были
                                          +2
                                          На дату выпуска этого RFC гляньте.

                                          RFC 3514
                                          Network Working Group                                        S. Bellovin
                                          Request for Comments: 3514                            AT&T Labs Research
                                          Category: Informational                                     1 April 2003
                                          
                                          
                                                            The Security Flag in the IPv4 Header
                                          

                                            0
                                              0
                                              Atakua, SerCe
                                              Извнияюсь, невнимателен. В таком случае вызывает улыбку наличие ссылки на статью «Do Not Track» в разделе «See Also» в статье на Википедии.
                                          +2
                                          Увеличим объемы интернет трафика!
                                          Сделаем жизнь АНБ сложнее и бессмысленнее!
                                            0
                                            Нет уж, давайте нашу жизнь сделаем лучше. Конечно, это сложнее чем гонять траффик.
                                              0
                                              Давайте сделаем нашу жизнь лучше, полностью согласен. давайте заливать большие картинки и видео в UHD использовать в телефонии :)
                                            +3
                                            Если бы АНБ было в нашей передовой стране, я бы предложил не строить новые дата-центры и продумывать алгоритмы, а снижать трафик пользователей. Резать скорость пользователям. А то как же — следить надо, а трафик растет. Не порядок. Как с почтой.
                                              0
                                              Ну у нас традиционно всегда решают проблему по настоящему, даже тов. Сталин говорил -нет человека, нет проблемы.
                                              0
                                              Больше торентов! Толще исошники!
                                                +1
                                                Рецепт «Как дискредитировать АНБ из другой страны»:
                                                Больше дезинформации для АНБ её проверка гораздо затратнее для экономики США, к тому же дискредитирует АНБ в глазах самих же американцев. Как в басне Толстого «Лгун» ( rvb.ru/tolstoy/01text/vol_10/01text/0051.htm ).
                                                В самом деле гражданину любой страны (кроме США) ничего не стоит ляпнуть что-нибудь в правильной форме (чтоб под свои службы не нарваться) про подрыв зданий, мостов и прочее, имея ввиду территорию США. Пока они будут нервничать, уйму денег потратят, кризис наступит и государство само урежет им финансирование автоматом.
                                                  0
                                                  Устроить DDoS — все разом идут в гугл искать «способы уничтожить кое кого», «способ собрать кое что» и т.д.
                                                  0
                                                  А может это какая нить кампания, что бы «притушить» тему по поводу слежки.
                                                  Типа «давайте пустим полуживую рыбу, что мы не справляемся с трафиком, и не можем контролировать всю инфу, люди поймут это и уменьшиться внимание за нашей деятельностью. И пустить нужно красиво, IT-шники не дурные люди, через бывших сотрудников и т.д.»?
                                                    0
                                                    Не, тут как-то не логично получилось в этом случае, они только привлекли к себе всеобщее внимание. Рыба-то «живая» оказалась! Смотрите как другие страны отреагировали — шум подняли. Тут получается либо с рыбой просчитались, либо эта информация — правда. Скорее второе.
                                                    +1
                                                    Хороший герб. Параноидальный орел с красными глазами на грани нервного срыва нацепил на голову два вантуза и в истерике рвет провода.
                                                    NAT ONAL SECURITY AGENCY iz watchin jeu.

                                                    Только полноправные пользователи могут оставлять комментарии. Войдите, пожалуйста.

                                                    Самое читаемое