Структурированную базу «Панамского архива» выложили в открытый доступ

    Самая масштабная утечка документов в истории интернета: 2,6 терабайта




    Международный консорциум журналистов-расследователей (ICIJ) выложил в свободный доступ «Панамский архив»: крупнейшую базу данных об офшорных компаниях, полученную с компьютеров панамской юридической фирмы Mossack Fonseca неизвестными лицами.

    Аноним (John Doe) передал репортёрам немецкой газеты Süeddeustche Zeitung 2,6 терабайта файлов — электронные таблицы, тексты писем, PDF, TIFF и другие форматы, в том числе древние и уже неиспользуемые. Понимая масштаб работы, те попросили ICJI организовать международный совместный проект.

    Миллионы графических изображений прогнали через программу распознавания символов Tesseract на 40 временных серверах в облаке Amazon. Для индексации текста использовали Apache Solr, для обработки документов в разных форматах — Apache Tika.

    В течение года архив изучали 370 репортёров из 80 стран мира. Чтобы облегчить им работу журналистам, разработчики из ICIJ подключили графический интерфейс от библиотечной программы Project Blacklight. Чтобы показывать информацию в графическом виде и отображать связи между объектами, пришлось использовать проприетарную программу Linkurious, а с помощью инструмента Talend содержимое реляционной SQL базы Mossack Fonseca перевели в формат Neo4j.



    Сейчас результат труда разработчиков предлагается оценить всем желающим через интернет.

    База ICIJ в структурированном виде доступна по адресу:
    https://www.occrp.org/en/panamapapers/database.html

    Можно скачать копию на свой компьютер (35,7 МБ в архиве).





    БД содержит информацию о почти 214 000 офшорных фирмах в 21 офшорных юрисдикциях.

    Интерактивная карта клиентов офшорных фирм


    В базе 11 516 фирм, которые принадлежат 6285 российским гражданам. Среди них — родственники и друзья высокопоставленных чиновников. Такая масштабная утечка документов может привести к ряду громких отставок и уголовных дел, хотя офшорные фирмы зачастую действуют в сером юридическом поле, не нарушая законодательство.

    Опубликована лишь часть информации из 11,5 млн файлов, которые удалось получить с компьютеров юридической компании Mossack Fonseca, одного из крупнейших в мире генераторов фирм-однодневок.

    Международный консорциум журналистов-расследователей не публикует всю имеющуюся информацию, здесь нет исходных документов или большой базы с персональной информацией, не указаны банковские счета фирм, содержимое электронной переписки и финансовые транзакции компаний. Это делается, чтобы не засветить персональные данные многочисленных людей, не причастных к финансовым преступлениям.

    Обнародованы только названия фирм, их юрисдикции, почтовые адреса и имена руководителей офшорных компаний. Данные охватывают период с 1977 по 2015 годы.

    База данных «Панамского архива» опубликована под свободной лицензией Creative Commons Attribution-ShareAlike. Международный консорциум журналистов-расследователей приглашает всё сообщество направить усилия на изучение и классификацию опубликованной информации.

    UPD. Первая находка сообщества Geektimes


    UPD2. Вторая находка сообщества Geektimes
    Support the author
    Share post

    Comments 68

      +6
      Ведь это только верхушка айсберга, а сколько еще таких фирм, со своими миллионами записей про воров всей планеты…
        0
        Аноним John Doe передал репортёрам немецкой газеты Süeddeustche Zeitung 2,6 терабайта файлов

        А сами исходные необработанные данные не выложили… или плохо искал?
          0

          Скачать можно в формате csv.

            +1
            Саму полную базу сканов всех документов и переписку вряд ли выложат полностью. Там могут быть персональные данные тысяч людей, не связанных с политикой и не совершавших преступлений. Сканы публиковались и будут публиковаться точечно, по компаниям, к которым имеют отношение политики или их окружение.
              +1
              То есть, как воровать сами данные — так это норм, а выложить это уже нельзя?
            +5
            > Международный консорциум журналистов-расследователей не публикует всю имеющуюся информацию, здесь нет исходных документов или большой базы с персональной информацией, не указаны банковские счета фирм, содержимое электронной переписки и финансовые транзакции компаний.

            То есть опять никаких доказательств?
            • UFO just landed and posted this here
                +3
                А вы не пробовали зайти через прокси где-нибудь в Америке или Азии? Если ваш айпишник из бСССР, почему бы вам не показать в первую очередь разделы, близкие вам? Многие новостные сайты именно так работают. Ну и в Вики в статью про OCCRP гляньте — «международный» не значит «глобальный».

                И про оффшоры Порошенко вроде никаких нестыковочек. Сканы были опубликованы, в офисе Порошенко подтвердили их подлинность.
                • UFO just landed and posted this here
                  • UFO just landed and posted this here
                  +3
                  А вот на этой страничке они на Эстонию с Португалией клевещут и даже на Германию с Францией, даже на Аллаха?
                  image
                    +2
                    ES — Испания, конечно, не Эстония.
                      +1
                      А может это Мексика и Бразилия? Они там как раз говорят на испанском (ES) и португальском (PT) соответственно.
                      –5
                      Согласен. Украли, рассекретили, а по факту выложили инфу так, чтобы дальше гнуть свою линию по разрушению России как государства. Что в 2Тб нашли целевого — то и выложили. Скорее всего остальной инфы и нет. Так цифру назвали. Для солидности. А потому, что выложили ни подробностей, ни расшифровок.

                      Джинса лезет отовсюду.: / Сообщениями, партиями, оговорками, вбросами.
                      +2
                      Думаю, заинтересованные структуры добудут и исходники, и прочие доказательства. Было бы желание.
                        –16
                        Это ж заказной вброс — какие Вам нужны доказательства? :)
                          +3
                          Да откуда вы все повылезали-то? Хорошо было раньше на Хабре, до введения свободной регистрации: один из немногих был ресурсов, свободный от ольгинских ботов.

                          И ведь карма в минусах у всех вас. Но нет, комментить вам всё равно разрешено.

                          Похоже пора завязывать с чтением комментов на Хабре, жаль.
                        –18
                        >> полученную с компьютеров панамской юридической фирмы Mossack Fonseca неизвестными лицами

                        Не полученную, а украденую. Это уголовное преступление в любом цивилизованном государстве.

                        >>понимая масштаб работы, те попросили ICJI организовать международный совместный проект.

                        Международный проект по публикации украденного. Куда катится этот мир?
                          +13
                          > Международный проект по публикации украденного. Куда катится этот мир?

                          WikiLeaks?
                            +7
                            Украдена информация о совершенных преступлениях. Оффшоры используют не просто так, часто это нелегальный уход от налогов, спонсирование чего-то нелегального (например перевод денег режимам на которые наложены санкции), и много других не очень честных вещей. Для «белой» налоговой оптимизации они подходят далеко не всегда. Поэтому раз уж информация стала достоянием общественности — надо ее проанализировать и найти высокопоставленных преступников, которые в этом участвуют.
                              +18
                              Одно известное имя я там уже нашел — широко известный в узких кругах Экслер ;)
                                +3
                                Странно, что он там есть. Он же борец за все хорошее и против всего плохого. Постоянно транслирует на своем сайте разоблачения про Путина (ну там боинг сбил, башенку разрушил и.т.д. и т.п.). Да и про коррупцию в России много пишет (ведь ему из Испании все видно).
                                И тут такой поворот :)
                                  +1
                                  И что же плохого в офшоре?
                                    –1
                                    Уход от налогов. Хотя, как я понимаю, и вполне законный вариант.

                                    Однако юмор ситуации в том, что буквально не так давно вбросили информацию о друге Путина, который имеет офшор. Тут же вся эта тусовка борцов «за все хорошее» кинулась подымать волну на тему «Ого, смотрите, друг Путина и офшор!!!». Им пытались возразить что ведь явно заказной вброс и верить ему без доказательств нельзя. На что тут же получали ответ что это в тоталитарной России кровавое КГБ всех обманывает заставляя журналистов под дулами автоматов писать ложь, а на демократическом западе журналисты всегда пишут только правду, а значит и это тоже правду. И тут такой поворот, один из тех, кто разгонял волну оказывается тоже владелец офшора. Интересно, будет он отмазываться (и как), или сделает вид что он тут не при чем.
                                      0
                                      Это или законный вариант, или уход от налогов. Третьего не дано. Иначе можно называть «уходом от налогов» заведение ребёнка или покупку квартиры.

                                      По поводу друга Путина мне сказать нечего, мне всё равно.
                                  +1
                                  Его офшор там связан с оффшором Дмитрия Гамолина, совладельца и продюсера Et Cetera Publishing Group, что означает его написание книги в рамках серии «Менеджер Мафии» — " Путеводитель по гангстерским фильмам" http://www.sostav.ru/articles/2004/07/28/mark280704/
                                  +2
                                  Украдена информация о совершенных преступлениях

                                  Не только о преступлениях, там преступные случаи никто не выбирал (а вот скрыть «забашлявших» вполне могли).

                                  Оффшоры используют не просто так, часто это нелегальный уход от налогов

                                  А часто — нет.
                                    +3
                                    Я же написал, что и без нарушений используют оффшоры, а то что украдена информация о преступлениях — подразумевалось что «в том числе», очевидно же что не каждый владелец оффшора — преступник. Просто чисто по логике в офшорах, которые скрывают при легальном обороте — смысла мало. Это ж получается что вы сделали офшор, создали себе проблемы в доступе к деньгам, добавили риски, добавили издержки — а в налоговую все равно в открытую отчитываетесь о доходах. Для чего тогда все эти проблемы? Налоговая знает обо всем в обоих случаях, а конкуренты/бандиты имеют те же шансы узнать как если бы деньги хранились просто в проверенном банке, пусть даже в другой стране.
                                      +3
                                      «Просто чисто по логике в офшорах, которые скрывают при легальном обороте — смысла мало.… Для чего тогда все эти проблемы? „
                                      Для акционеров, которым проще/понятнее иметь юрисдикцию там.
                                      Для акционеров, которым проще/понятнее договорится друг с другом там, а не бегать по странам.
                                      Для акционеров, которым проще/понятнее иметь дело с законодательной/налоговой/правовой системой, которая не меняется каждый месяц как шторм — непонятно куда качнет.
                                      Для тех, кто что интересное (в разных смыслах) делает, чтобы снизить риск рейдерства.
                                      И т.д.
                                        +2
                                        Во всех этих случаях оффшоры не скрывают, и ничего удивительного, следовательно, из этих панамских документов не получат.
                                        +6
                                        Конкретно у нас в Украине офшоры — практически стандарт для крупных компаний, заинтересованных в международном рынке и иностранных инвестициях. Их используют не столько для ухода от налогов, сколько для ухода от ублюдочной коррумпированной полусовковой системы права. В нашем законодательстве многих привычных для цивилизованного инвестора инструментов просто нет. Плюс перспектива судиться в наших судах… Поэтому создаются юрлица в удобных юрисдикциях с понятным для всех корпоративным законодательством.
                                          +3
                                          В этих случаях оффшоры не скрывают, все открыто говорят где они зарегистрированы и ведут прозрачную бухгалтерию. Речь в основном о «внезапных» оффшорах, о которых никто не слышал.
                                      +2
                                      В Украине очень часто оффшоры используют для фиксирования долей в компаниях. Именно по причине лучшей защиты прав акционеров (особенно, миноритарных) и британского права, действующего в некоторых юрисдикциях.

                                      Альтернатива оффшоре — дорогая в открытии и поддержке компания в какой-то стране ЕС, например (что не очень приемлемо, если у компании пока нет больших оборотов), где уже есть хорошее законодательство. Местные компании только технические, т.к. локальное правосудие не особо работает.
                                        +2
                                        Офшоры это не преступление иначе были бы вне закона, это такая лазейка в законодательстве, для участия иностранных фирм, то что некоторые используют их для отмывания денег, это нужно присекать. К примеру, как делают в Молдове, 10 % акций принадлежат офшорной организации на которую постоянно скидывают деньги и постепенно деньги уходят в конечном счете на чей-то счет.
                                          +1
                                          А в чём проблема с выплатой в оффшор? Если вы оплачиваете дивиденды внешним партнёрам — где бы они не находились — то налоги выплачиваются сразу (18%). Есть список стран с непрозрачным законодательством — в циркуляре НБМ — к которым при транзакциях уделяется больше внимания, чем обычно. Во всё остальном — единственная претензия к оффшорам — это вовсе не налоги, а то, что они НЕ делают конечных бенефециаров публичными. Но в этом-то и смысл оффшоров :)
                                        +3
                                        Не полученную, а украденую. Это уголовное преступление в любом цивилизованном государстве.


                                        Является ли, к примеру, Германия цивилизованным государством, с вашей точки зрения? В 2010 году федеральный конституционный суд разрешил использование купленных краденых данных о налоговых уклонистах в уголовных делах: https://de.wikipedia.org/wiki/Steuers%C3%BCnder-CD#Rechtslage

                                        Или о каких именно цивилизованных государствах вы говорили?
                                        +6
                                        Аноним John Doe

                                        Обычно John Doe и значит «аноним», это не его «ник»
                                          –18
                                          Очередной вброс инфы для управления массами.: / Разоблачители, блин.
                                            –6
                                            А почему выкладывают «структурирована» версию? «Где пруфы Билли?» (с)
                                            Мне кажется, что пока нет оригиналов всее, что выкладывают не больше, чем хорошо продуманная дезинформация.
                                              +2
                                              Оригиналы тоже могут быть и дезинформацией и чем угодно
                                                +6
                                                Зачем же тогда фигуранты выложенных материалов подтверждают правдивость «дезинформации»? А потом ещё и очень неуклюже отмазываются?
                                                –5
                                                «У нас есть доказательства только мы вам их не покажем».
                                                    +1
                                                    https://offshoreleaks.icij.org/nodes/10102835 по той же схеме
                                                    –7
                                                    Проблема всех этих документов в том, что это идеальный вариант добавить к 80% правды, 20% лжи :(
                                                      +5
                                                      Само по себе наличие офшора не является преступлением (конечно зависит от страны).
                                                      Но ситуация сразу меняется, когда вдруг обнаруживается, что слесарь Вася всю свою жизнь работающий на заводе получая 30к рублей, имеет на счету где-то там за бугром 2 миллиарда и даже если бы всё семейство последние 500 лет откладывало деньги такой суммы не будет. Вопрос — откуда деньги Зин? Если бы деньги хранились на счету в государстве проживания, то данный факт вскрылся бы раньше и в нормальном государстве слесаря Васю бы подвесили за яйца если бы он не смог логически объяснить происхождение зелени.
                                                        0
                                                        А что мешает «расследователям» в этот список нескольких Вась дописать? Ведь, как они сами заявляли, оригиналы и какие-либо доказательства они предоставлять не будут…
                                                          +2
                                                          ИМХО, оригиналы они не будут в публичный доступ выкладывать, а по запросу соотв.служб вполне.
                                                          Но в целом добавить лишних мешает только то что если вскроется обман то сами журналисты потеряют всё доверие.
                                                          Как-то проскакивала статьи о методах засирания мозгов рядовым гражданам, суть в том что если долго и упорно обманывать люд, то рано или поздно он перестанет верить вообще всему и даже правдивая информация будет проигнорирована и затеряна в море бреда.
                                                            +1
                                                            > если вскроется обман то сами журналисты потеряют всё доверие.
                                                            Другими словами — не мешает ничего. Историй про обман со стороны журналистов было много, Вспомни хоть историю про выкидывание младенцев из инкубаторов. Ну вскрылась правда — и что? И ничего.
                                                              –2
                                                              Конкретно этот случай выглядит как «Мопед не мой, я просто разместил объяву». Журналисты же не сами добывали архив, по их словам, а просто получили.
                                                        +11
                                                        Смотрю на заминусованные комментарии (и аккаунты этих товарищей) и прихожу к мысли что эксперимент администрации с предоставлением статуса only-comment для случайных посетителей оказался сомнительным.
                                                        +3
                                                        >База данных «Панамского архива» опубликована под свободной лицензией Creative Commons Attribution-ShareAlike.

                                                        Вот мне интересно, а это вообще легально украденное обработать и выложить под свободной лицензией? Не то, чтобы против, но звучит комично.
                                                          0
                                                          Но это же не копия, а производное произведение!
                                                            0
                                                            Скорее всего, юридическая ответственность за кражу конфиденциальных данных лежит на анониме, который их украл. Дальше по цепочке — ответственности уже нет. Ирония судьбы — всякие мутные финансовые операции точно так же отмываются через цепочки офшоров и подставных лиц: на входе явный криминал, на выходе — респектабельная компания, которую к этому криминалу уже фиг привяжешь ))
                                                              +3
                                                              Круто. Надо предложить эту схему торрент-треккерам. Неустановленный аноним пиратит фильмы, музыку и софт, а потом треккер выкладывает их под свободной лицензией. :-D
                                                                +1
                                                                Великолепная идея.
                                                                Есть только одна маленькая проблема: в большинстве стран наказывается не само пиратство, а именно распространение. Ну или как минимум распространение наказывается строже :)
                                                                  +2
                                                                  Значит надо распространять через неустановленных анонимов.
                                                                    +2
                                                                    Либо просто поменять законодательство в вопросах авторского права :)
                                                                      +1
                                                                      Они так и делают. Торрент скачивается с другого домена.
                                                                      +1
                                                                      Так это за распространение нелицензионного контента. А тут он внезапно лицензионным становится. :)
                                                                      +1
                                                                      Вы только что изобрели скачивание торрентов через VPN :-)
                                                                  +1
                                                                  Артур Кларк. Когда явились твермы…

                                                                  Теперь мы знаем — правда, утешения нам от этого не много — что когда Твермы засекли Землю своими омфалмоскопами дальнего действия, им самим приходилось спасаться бегством от своих давних врагов Мукоидов. Однако же, они среагировали с поразительной быстротой и умением.
                                                                  За несколько недель радиопрослушивания они накопили миллиарды слов радиосигналов, передаваемых по системе спутников связи. Поразительные лингвисты, они в совершенстве ознакомились с основными земными языками. Более того, они подвергли анализу нашу культуру, нашу технологию, наши политико-экономические системы и наши средства защиты. Для их отточенных интеллектов, подстегиваемых отчаянием, потребовался лишь месяцы на выявление наших слабых точек и на разработку дьявольски эффективного плана компании.
                                                                  Твермы знали, что США и СССР располагают боеголовками совместной мощности почти в терратонну. Пятнадцать других ядерных держав могли наскрести разве что пару дюжин гигатонн и испытывали недостаток в средствах доставки, но даже самое слабое сопротивление могло оказаться для захватчиков роковым. Следовательно, удар должен оказаться мгновенным, абсолютно неожиданным и подавляющим раз и навсегда. Возможно, они планировали молниеносный налет на Пентагон, Рэдфорд, Кремль и прочие центры военного командования. Но, если так, их концепции отличались излишней наивностью.
                                                                  С тонкостью, которую после всего случившегося мы можем теперь с болью оценить, они выбрали нашу наиболее компактную и наиболее уязвимую болевую точку.
                                                                  Дождливым воскресным днем в четыре часа по среднеевропейскому времени, их оскорбительно беззащитный флот совершил нападение. Оружие, которое они применили, включало в себя неотразимые Психоделические Лучи, Зудопрожекторы, превращавшие добродетельных бюргеров в нетерпеливых нудистов, чудовищные Поносные Бомбы и доводящие до изнурения Гнойноароматические Аэрозольные Установки. Все потери человечества составили тридцать шесть человек, большей частью из-за истощения и сердечной недостаточности.
                                                                  После этого основные силы — три корабля — атаковали Цюрих. По одному кораблю было направлено в Женеву, Базель и Берн.
                                                                  Позже было выяснено, что небольшое транспортное судно действовало в направлении Вадуца.
                                                                  Не было броневых плит, которые смогли бы остановить их вооруженных лазерами роботов. Телекамеры, помещенные в их брюшных щупальцах, могли обрабатывать миллиарды битов информации в секунду.
                                                                  Прежде чем настало время завтрака, они знали всех обладателей нумерованных банковских счетов в Швейцарии.
                                                                  Потом с первой почтой в понедельник ушло специальной отправкой несколько тысяч тщательно отобранных заказных писем — и завоевание Земли было завершено.
                                                                    0
                                                                    Те у кого есть большие деньги и власть, всегда воровали, воруют и будут воровать. Интересно конечно, лишний раз показывает как велика роль информации в современном мире. Хотя мне интересны утечки другого рода… утекли бы например исходники последней Винды или поискового движка Гугла… это было бы интересно))
                                                                      –5

                                                                      Данные по Северной Америке заведомо подчищены?

                                                                        +5
                                                                        ORLY?
                                                                        Вы то сами файлы смотрели, или лишь бы покричать? Там США мелькают в два раза чаще чем Россия, например.
                                                                          –1
                                                                          Нет, на скриншот на карте глянул.
                                                                        +3
                                                                        > Самая масштабная утечка документов в истории интернета: 2,6 терабайта
                                                                        > Можно скачать копию на свой компьютер (35,7 МБ в архиве)

                                                                        а где же торрент с исходниками

                                                                        Only users with full accounts can post comments. Log in, please.