Открытые данные *

Так неслучайно сложилось что вот уже 4-й раз, начиная с 2011 года, мы проводим конкурс приложений Apps4Russia.
Мы — это некоммерческое партнерство «Информационная культура» созданное как раз ради этого конкурса и занимающееся продвижением открытых данных, краудсорсинга и открытостью государства как такового.

Краткая история

В 2011 году, насмотревшись на то как в мире возникают один за другим соревнования для разработчиков такие как Code4America, Apps4Berlin, Apps4Finland и многие другие — меня посетила навязчивая мысль что конкурс был бы идеальным способов продвижения темы открытых данных которой я занимался тогда и занимаюсь по сей день. С группой неравнодушных коллег мы на собственные средства провели первое соревнование с одной номинацией, а со второго раза начали привлекать к соревнованию деньги спонсоров и выходить на всё большие масштабы.

И вот, последние 3 года мы проводили соревнование именно на открытых данных. Данных опубликованных государством, бизнесом, в виде больших общественных проектов и даже нами самими.

А в этом году, мы решили немного изменить “правила игры” и основной упор конкурса делается на понятные приложения — то есть на те приложения, которые помогут гражданам сделать их жизнь более прозрачной и понятной.

Почему понятность? Да потому что весь опыт работы с открытостью государства, данных и всего что с этим связано показывает что это бесполезно если люди не чувствуют в этом практической пользы. Но практической пользы не той которую пытаются создавать госорганы делая мобильные приложения или веб-проекты самостоятельно, а те которые разработчики могут сделать сами.

Номинации

Всего у нас 4 номинации.

Привет, Хабр!

Что дают человечеству открытые данные? В этом году они помогли воссоздать Данию в Майнкрафте – достижение интересное, но вряд ли значимое для простого обывателя. Данные позволяют сравнить города по определенным параметрам, узнать мнения людей о них (выгрузив те же твиты с геолокацией), узнать о передвижении людей (данные с навигационных сервисов), после чего их можно использовать для улучшения жизни – например, для снижения нагрузки на дороги.

Интересное исследование я вчера услышал на одном мероприятии: проанализировав передвижение автомобилей по Москве, команда разработчиков платформы для такого анализа выяснила, что новые шоссе в этом городе не решат проблему пробок. Потому как по городу люди движутся абсолютно хаотично, так что для устранения проблемы необходимо строить «капиллярные» сети дорог. С другой стороны, в Московской области все передвигаются именно по основным дорогам.

Это лишь один из способов практического использования открытых данных. Можно долго говорить еще и о том, как эти данные помогут продавать что-либо, но меня интересует вопрос чуть более гуманитарный – вопрос улучшения жизни, безопасности и так далее.

Добрый день, коллеги!

Как многие знают, 14 сентября 2014 года пройдет единый день голосования, во многих регионах России выбирают себе депутатов и иногда мэров.
При этом информационное обеспечение, на мой взгляд, хромает. Главное неудобство заключается в том, что информацию о кандидатах невозможно посмотреть списком, только список без подробностей (к тому же разбитый на страницы по 20 человек) и по одному человеку с подробностями.

Солнечным летним днем пришла мне идея вытащить эту информацию, чтобы можно было её удобно анализировать и выбирать кандидатов наглядно и с умом. К сожалению, ЦИК не предоставляет каких либо экспортных вариантов по всем выборам (я по крайней мере не нашел), поэтому решение — парсинг страничек роботом.

Многим известен цикл зрелости технологий (Hype Cycle), предложенный аналитической компанией Gartner. В википедии его ещё называют циклом ажиотажа или циклом общественного интереса к технологиям. Сейчас общественный интерес ярко проявляется в количестве поисковых запросов по названию технологии или технологического продукта. И (О радость!) у Google есть мощное средство для анализа популярности поисковых запросов — Google Trends. Ради справедливости надо сказать, что у Яндекса и некоторых других тоже есть статистика, но значительно менее функциональная. Соответственно мы можем проверить проявляется ли Hype Cycle в открытых данных гугла, а заодно и сравнить популярность некоторых технологий.

Под катом пара графиков по технологиям из Hype Cycle и множество графиков по холиварным темам из IT — от XML vs JOSN до MySQL vs HBase. В целом, благодатная почва для диванной аналитики.

Каким будет Веб в будущем? Об этом много пишут — начиная от новых спецификаций на HTTP, позволяющих быстрее и защищенней передавать данные по сети, заканчивая идеями “семантического” веба. Это все замечательно, вебу нужны быстрые сети и организованные данные, но есть проблемы которые остаются пока недооцененными и нерешаемыми с использующимися технологиями. Давайте соберем претензии к текущей реализации?

Гитхаб продолжает расширять области своего применения — руководство компании видит Гитхаб в будущем не только как инструмент для программистов, но и как универсальное хранилище любых текстовых данных. На нём уже есть репозитории, в которых пишутся книги, законопроекты, публикуются статистические данные. А на прошлой неделе появилась возможность присвоить любому своему репозиторию идентификатор DOI. Это позволит ссылаться на данные или код из репозиториев Гитхаба в научных работах и статьях общепринятым в научной среде способом.

Помимо конкурсов которые мы проводим на базе информации по контрактам — мы (Информационная культура) и я лично (Иван Бегтин) продолжаем убеждать российские министерства открывать новые данные полезные для разработчиков.

В частности, я знаю что Министерство Финансов России планирует делать дальнейшие шаги в обеспечении собственной открытости и мы хотим убедить коллег в Министерстве открыть самые интересные данные для разработчиков.

Знаю поскольку состою в совете по открытым данным и в общественном совете при Казначействе

Поэтому, по нашей собственной инициативе, мы проводим этот опрос чтобы понять что хотят разработчики от Министерства и от Федерального казначейства.

Просим Вас ответить на вопросы в кратком опросе в этом посте на ХабрХабр и в полном опросе по ссылке — https://www.surveymonkey.com/s/RF78FF3

Все ответы будут использованы нами в дальнейшей работе и я постараюсь донести их до тех кто отвечает за открытость в Казначействе и в Минфине.

В какой-то момент мы столкнулись с необходимостью организовать шифрованное хранилище для удаленного размещения файлов. После недолгих поисков нашел легкое облачное решение, которое в итоге полностью устроило. Далее я вкратце опишу это решение и некоторые особенности работы с ним, возможно, кому-нибудь пригодится. На мой взгляд, вариант надежный и вместе с тем достаточно удобный.

Органы государственного управления не только скрывают колоссальное количество информации, но еще и создают огромный объем данных. Собственно, они являются одними из крупнейших источников данных в мире, исходные материалы, которыми они располагают, могут стоить больших денег. Согласно составленному в 2011 году прогнозу компании McKinsey, к 2020 году потенциальная ценность Больших данных для европейского сектора может возрасти до двухсот пятидесяти миллиардов евро в год. Большая часть этих данных создается на бюджетные средства, следовательно, было бы логично предоставить их для общественного использования. Это позволило бы людям создавать новые инновационные сервисы, которые могли бы оказать существенное влияние на экономический рост.

Каждый день мы сталкиваемся с интересными случаями в КЛАДР, справочниках фамилий и иных ресурсах. Сегодня хотим вспомнить самые забавные из них.

TOP интересных фамилий

У Вас необычная фамилия? Поверьте, Вы далеко не одни. Вот, например, частота появлений в небольшой выборке в одном нашем проекте:

Как видим, Ленин и Есенин стоят на первых местах по популярности среди клиентов, а вот Сталин нынче не в тренде. И ещё тут не указан Пушкин, который встречается в 2.5 раза чаще, чем все выше вместе взятые.

Поводом для данной заметки стала небольшая, практически незаметная новость об ограничении доступа к Open Source и онлайн-образованию для стран, находящихся с США в «натянутых» отношениях.

Нижепредставленная информация сама по себе далеко не нова (дата выхода статьи — 2008 год), но, на наш взгляд, именно сейчас настал хороший момент для того, чтобы еще раз обратить внимание на эту проблему.

Приветствую!

Сегодня жена пожаловалась на то, что ее любимый сайт (женский форум. думаю, его адрес не существенен) уже дня 3-4 не открывается.
Но открывается с телефона (3G Билайн), в т.ч. если телефон использовать в качестве точки доступа.
Провайдер ДОМ.ру Омск.
Решив, таким образом, что дело не в компе я сходил уже по-привычке (кто бы мог подумать, что такая привычка появится!) на сайт реестра.
Получил ответ «не значится».
Глянул FAQ

Как узнать причину, по которой ограничен доступ к ресурсу, если в реестре он не значится?
Ответ:
Причины отсутствия доступа к информационному ресурсу Вы можете узнать у обслуживающего Вас провайдера хостинга, оператора связи.

Связываюсь с поддержкой, и девочка мне говорит, что помимо федерального реестра запрещенных сайтов есть механизм блокировки сайтов по решению прокуратуры и судов отдельных городов. И искомый сайт заблокирован провайдером именно по этой причине.

Аналитики Яндекса проанализировали данные о времени работы почти полутора миллионов российских организаций и узнали, как много принято работать в разных индустриях. И как это отличается для разных регионов России.

Исследование проводилось на основе данных Яндекс.Справочника — крупнейшего каталога организаций в рунете.

Средняя продолжительность рабочего дня у российских организаций (без учета круглосуточных) — 9 часов 50 минут. Дольше всех работают в Москве (10 часов 31 минуту). Меньше всех — в Калининградской области (9 часов 34 минуты).



Рабочий день в России начинается в 9:00 — в это время работают уже две трети организаций. Раньше всего встают в Волгоградской области, Татарстане и Краснодарском крае — здесь треть всех организаций работает уже с восьми утра, а после девяти открыто более 75% заведений. Позже всех начинают работать столичные организации — в Москве в девять утра открыты лишь 55% организаций, в Санкт‑Петербурге ещё меньше — 41%.

Без учёта круглосуточных организаций получилось, что самый длинный рабочий день у боулинг-клубов и кинотеатров — почти 14 часов в день, а самый короткий — у станций переливания крови и медпунктов — меньше семи часов в день. Из круглосуточных организаций выделяются бани и сауны — вне зависимости от региона они почти всегда открыты 24 часа в сутки.

Здравствуйте, эта статья более представляет собой наброски для размышления, нежели полноценную статью и её цель — обсудить одну интересную и неактуальную тему.

Постановка задачи

Передать сообщение собеседнику, быстро проверить доставку, гарантировать возможность чтения не ранее, чем через заданное время, причём гарантировать только саму возможность чтения, а не непосредственно чтение.

Госзатраты (clearspending.ru) — это новый общественный и некоммерческий проект которым мы занимались последние полгода в виде базы всех государственных и муниципальных контрактов.

Мы взяли всю базу контрактов с zakupki.gov.ru и, после некоторого количества усилий, превратили в веб-сайт с удобным поиском, навигацией, некоторым количеством аналитики и, что особенно важно, с API.


И вот тут остановимся подробнее. API — это чуть ли не самая главная отличительная черта сайта от большинства подобных ему.

Здравствуйте,

Хочу обсудить с вами концепцию сервиса публикации или передачи данных строго не ранее указанной даты и/или только в определенной геолокации. Жду любой (кроме очевидной) критики и проэмоционаленных замечаний (страхи, переживания, неожиданные кейсы и т.п.). Это прежде всего — подход, но далее, для простоты, буду называть его сервисом.

В корне архитектуры сервиса, с заложенным недоверием ко всем посредникам — шифрование исходных данных, разбиение на максимально большое количество кусочков (ничего не значащих сами по себе) и последующее их «распыление» по участникам. При достаточно большом количестве участников, разнообразии операционных систем, устройств и юрисдикций — попытки вмешаться будут или бессмысленны или достаточно заметны, чтобы локально принять адекватные меры.

При самых строгих настройках, контроль за отдачей «кусочков» (далее iprates — information particles) архитектурно находится на самих устройствах, проще говоря — «не отдам, ещё рано».

22 февраля во всём мире пройдет Open Data Day посвященный открытым данным и организованный Open Knowledge Foundation при поддержке многих межгосударственных и международных организаций таких как ООН и Всемирный банк.

Подробнее о том как он будет проходить можно прочитать на сайте http://opendataday.org/

Open Data Day — это совершенно некоммерческая нефинансируемая никем движуха, эдакий такой большой митап для пользы дела.

Вы можете помочь нам следующим образом:

• накидав идеи для разработчиков
• пригласив разработчиков что-нибудь славное на открытых данных поделать;
• предложить какие-нибудь свои данные интересные на которых можно вытворять что-то интересное;
• предложить выступление по тому что вы делаете по открытым данным;
• предложить какие-нибудь прикольные неденежные призы;

Формат будет простой:

Около двух лет назад государство взяло курс на активное вмешательство в интернет-пространство и его регулирование. Самое время подвести итоги постепенного усиления цензуры в интернете.

Если вы помните, летом 2012 года Госдума внезапно приняла поправки в 139-ФЗ «о защите детей от вредной информации».Это объяснялось необходимостью защитить наших детишек от педофилов и наркоманов, а также от тех, кто их склоняет к совершению самоубийств. Закон, конечно, содержал гарнир в виде маркировки продукции для детей знаками 18+ и т.п., но вот мясцо этих поправок было в виде механизма цензуры посредством блокировки сайтов.

В этом мини-исследовании я выступлю как капитан очевидность и покажу то, что все и так знали, только для большей убедительности приведу ряд объективных показателей. Так что теперь можно будет оперировать и конкретными цифрами!

Итак, давайте посмотрим, действительно ли введение цензуры было продиктовано необходимостью защиты наших детей.

21 мая 2012 года Министром образования и науки Российской Федерации назначается Дмитрий Ливанов. В своем первом публичном выступлении он озвучивает намерение Министерства образования и науки (МОН РФ) провести всесторонний аудит сектора исследований и разработок, включая институты РАН, государственные научные организации и высшие учебные заведения. Это заявление можно назвать зарождением «Карты российской науки».

К сожалению, за событиями вокруг реформы РАН этот проект как-то потерялся и не получил, на наш взгляд, должного внимания со стороны IT-сообщества. Мы предлагаем вам небольшую ретроспективу: путь проекта от концепции до реализации.

Открытые данные как явление существует давно, а вот вопросов по ним возникает большое множество и, для того чтобы снять хотя бы часть из них, мы организовали школу открытых данных которая проходит в форме лекций, семинаров и мастер-классов.

Это бесплатный просветительский проект в котором мы рассказываем об открытых данных всё что знаем и что может пригодиться другим.

При том что наша цель — это выйти на формат вебинаров, в первом шаге мы стали проводить мероприятия с записью их на видео и с открытой публикацией онлайн.

Лекции ведут российские и зарубежные преподаватели и практики и все они, по возможности, настолько приближены к практике насколько это возможно.

Сейчас у нас накопилось 7 таких занятий и нам очень важно получить обратную связь по тому что было рассказано и что хотелось бы услышать.

Вот тут те лекции что уже прошли.