Skip to content

Датляндия или до чего могут довести консультанты

Пятничное видео. GE, как и все большие компании, периодически попадает в лапы консалтеров (это случается даже с консалтерами), которые втюхивают совершенно безумные прожекты. Вот и сейчас: для продвижения идеи использования Big Data в городском хозяйстве они придумали серию стилизованных под фильмы роликов, в которых большие данные побеждают вампиров, инопланетян, конец света в отдельно взятом городке Datalandia.

Смотрите и не поддавайтесь консалтерам. Мы очень хитрые.

Большое подробное руководство по политике открытых данных

Эта запись висит у меня в черновиках уже неделю, и я решила, что лучше написать коротко, чем не написать вообще.

Большой подробный гайд по формированию политики открытых данных.

МВД и открытые данные, открытые данные и статистика

Недавно прошла новость о том, что МВД России опубликовало 12 дата-сетов: продолжаем искать полезные наборы данных, а заодно посмотрим, чем открытые данные отличаются от статистики.

Открытые данные МВД России:

С перечнем территориальных подразделений и других учреждений МВД России все ясно – это полезная и нужная информация, которую в принципе любое ведомство должно раскрывать. НП «Инфокультура» и Фонд Кудрина проводили конкурс на основе этих данных: победили приложения, позволяющие найти организации МВД России или участкового. Дальше по списку идет план инспекций подразделений охраны – тоже важная информация, но для ограниченного круга представителей охранного бизнеса.

Самое нужное и востребованное – данные по ДТП и преступности – по-прежнему (как и в ЕМИСС) представлены в виде статистических сведений, которые интересны в общем, но не дают нужного уровня детализации. Большую часть людей волнуют куда более обыденные вещи: сколько и каких преступлений зарегистрировано именно в их районе, на их улице, в какое время и в какие дни наблюдается рост количества преступлений и угонов, а самое главное – удалось ли полиции задержать преступника в каждом конкретном случае.

Текущий уровень детализации наглядно демонстрирует Портал правовой статистики, который работает на статистических сведениях ЕМИСС. Все данные доступны только до уровня региона.

Другой пример – карта преступлений в Чикаго, The Chicago Tribune Crime Data.

Эта карта основана на постоянно обновляемом дата-сете с городского портала открытых данных. Данные доступны начиная с 2001 года. В первом приближении можно посмотреть на статистику по районам города (их 77):

В более детальном варианте  (по каждому району) отображается подробная картина с точными или приблизительно точными координатами преступления:

Для каждого района собирается своя статистика – где больше всего происходит преступлений, каких, качество жизни, сравнение ключевых показателей по годам и т.д.

Автор обзора Юлия Митяева.

 

Что сделал мэр (не наш)

NYTimes опубликовала хороший отчет мэра Нью-Йорка Блумберга о его работе на посту. Кандидатски

Бета-версия портала открытых данных США

Еще в середине июля появилась ранняя бета-версия портала открытых данных США data.gov. Она еще не введена в эксплуатацию, официально продолжает работать старый портал:

В свете того, что у нас сейчас продолжается всеобщее согласование концепции портала открытых данных Российской Федерации, интересно посмотреть.

Проект портала явно направлен на то, чтобы работать с разработчиками как с разработчиками, и с не-разработчиками — чтобы 90% живых людей тоже было понятно и даже слегка полезно. Это вечный спор вокруг портала открытых данных: для кого он создается. Обычно дискуссии крутятся по одной траектории: «как сделать понятным широкой аудитории — не надо широкой аудитории, это для разработчиков — точно, для разработчиков — но ведь государственный сайт должен быть понятен каждой бабушке». Знаменитая Каждая Бабушка загубила уже не один проект.

Next.data.gov очевидно поделен на «разработческую» и «общую» части. Это, как предполагается, для всех — отличный раздел с «самым интересным», редакторская выборка. Разделы крупных тем — энергетика. здоровье

 

Редакторы подходят к идее освещения государственных открытых данных без особого пуризма — скажем, важный проект для студентов MyData, центр управления личными данными школьников и студентов, где каждый учащийся может систематизировать всю информацию о своей успеваемости, кредитах, курсах, бэйджах, стипендиях, займах — точно не open data.

 

Редизайн федерального портала государственной статистики

Советник Министра связи и массовых коммуникаций РФ Дмитрий Сатин собирает референтную группу аналитиков для обсуждения редизайна федерального портала государственной статистики. Сейчас, когда многие федеральные министерства и ведомства начали активно создавать пилотные разделы и публиковать первые «полезные» дата-сеты, мы – не все, но многие – не вполне заслуженно забыли об этой системе. А зря, полезные и актуальные данные там есть.

ЕМИСС была введена в промышленную эксплуатацию в феврале 2012 года – еще до  волны открытых данных. Она стала одной из первых серьезных попыток собрать воедино наиболее ценную статистику по федеральным ведомствам – пусть только на уровне регионов с общей выдачей результатов по сельским поселениям и городам.

Главная проблема в том, что уровень детализации (до регионов), безусловно, позволяет ответственным ведомствам нарисовать общую картину, выявить «провалы» на уровне региона или какие то закономерности. Изначально именно это и предполагалось: часть индикаторов ЕМИСС (около 500-600) должны были войти в ГАС «Управление» – федеральную мета-систему, которая позволяла бы оценивать работу чиновников по достижению важнейших социально-экономических показателей.

Большая часть данных ЕМИСС загружена сейчас на хаб открытых данных НП «Инфокультура». Если кратко по содержанию и данным: текущий уровень детализации не позволяет создавать действительно полезные приложения и сервисы для граждан – чтобы мэшапить данные, нужные вполне конкретные географические данные и адреса. К тому же многие наборы данных давно не обновлялись – часто можно встретить данные за 2010 и 2011 годы.

По отдельным ведомствам представлены вполне востребованные данные – не только с точки зрения аналитиков или журналистов. Вопрос в том, чтобы опубликовать их в более подробном виде – до каждого отдельно взятого учреждения, чтобы они стали интересны еще и разработчикам. Но этим открытые данные, наверное, и отличаются от статистики.

Чего сейчас нет на портале государственной статистики, и что я бы добавила:

  • Поиск статистических данных по теме (здравоохранение, рынок труда, сельское хозяйство и окружающая среда, дети и образование, население и т.д.)
  • Подписку на новые материалы (статистику), календарь публикаций с отображением последних обновлений
  • Поиск статистики по регионам, можно – с помощью интерактивной карты
  • Адаптацию для слабовидящих и имеющих проблемы со зрением людей – глаза устают и с полноценным зрением.
  • Ссылку на сайт ответственного ведомства – Росстата и другие важные источники, где хранится много данных и статистики.

Потенциально интересные статистические сведения (быстро):

Как портал электронных госуслуг увеличивает количество доноров органов

Хотела придумать заголовок для желтой прессы, но как-то не придумывается.

На портале электронных госуслуг Великобритании заработала экспериментальная программа по регистрации в национальный реестр доноров внутренних органов. После завершения одной из услуг для автомобилистов (транспортный налог, водительские удостоверения и другие важные вещи) пользователь получает приглашение зарегистрироваться как потенциальный донор:

Эта страница выиграла в А/B у другой версии:

В результате тестирования количество регистраций увеличилось примерно на 10 000 в месяц. Сейчас портал электронных госуслуг — третий по объему источник регистрации в реестр, сразу после медицинских учреждений и агентства по выдаче водительских удостоверений.