Распоряжение Департамента информационных технологий г. Москвы от 26.04.2013 N 64-16-64/13 "Об утверждении регламента обработки открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных"
ПРАВИТЕЛЬСТВО МОСКВЫ
ДЕПАРТАМЕНТ ИНФОРМАЦИОННЫХ ТЕХНОЛОГИЙ ГОРОДА МОСКВЫ
РАСПОРЯЖЕНИЕ
от 26 апреля 2013 г. № 64-16-64/13
ОБ УТВЕРЖДЕНИИ РЕГЛАМЕНТА ОБРАБОТКИ ОТКРЫТЫХ ДАННЫХ
В АВТОМАТИЗИРОВАННОЙ ИНФОРМАЦИОННОЙ СИСТЕМЕ
"ОБЩЕГОРОДСКАЯ ПЛАТФОРМА ОТКРЫТЫХ ДАННЫХ"
В целях реализации Положения об автоматизированной информационной системе "Общегородская платформа открытых данных", утвержденного постановлением Правительства Москвы от 2 апреля 2013 года № 187-ПП "Об автоматизированной информационной системе "Общегородская платформа открытых данных":
1. Утвердить:
1.1. Регламент обработки открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных" согласно приложению к настоящему распоряжению.
2. Контроль за выполнением настоящего распоряжения возложить на заместителя руководителя департамента Белозерова А.С.
Руководитель департамента
А.В. Ермолаев
Приложение
к распоряжению Департамента
информационных технологий
города Москвы
от 26 апреля 2013 г. № 64-16-64/13
РЕГЛАМЕНТ
ОБРАБОТКИ ОТКРЫТЫХ ДАННЫХ В АВТОМАТИЗИРОВАННОЙ
ИНФОРМАЦИОННОЙ СИСТЕМЕ
"ОБЩЕГОРОДСКАЯ ПЛАТФОРМА ОТКРЫТЫХ ДАННЫХ"
I. Общие положения
1.1. Настоящий Регламент определяет порядок подготовки, публикации и обновления открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных" (далее - АИС ОПОД) (далее - Регламент). Регламент определяет порядок осуществления должностными лицами органов исполнительной власти города Москвы действий в рамках:
- оценки возможности раскрытия наборов данных;
- подготовки наборов данных к раскрытию;
- публикации наборов данных в АИС ОПОД;
- актуализации набора данных в АИС ОПОД;
- отзыва наборов данных из АИС ОПОД.
1.2. В настоящем Регламенте используются следующие основные понятия, термины и сокращения:
1.2.1. График публикации открытых данных - утверждаемый заместителем Мэра Москвы в Правительстве Москвы - руководителем Аппарата Мэра и Правительства Москвы единый календарный план публикации наборов данных.
1.2.2. Паспорт набора открытых данных - формализованное описание набора открытых данных.
1.2.3. Размещение набора открытых данных - передача набора открытых данных Поставщиком открытых данных и обеспечение технической возможности его размещения оператором в АИС ОПОД в соответствии с Графиком публикации открытых данных.
1.2.4. Структура набора данных - описание полей набора данных и их связей.
1.2.5. Отзыв данных - прекращение доступа к открытым данным посредством информационного портала в случае обнаружения ошибок оператором в опубликованном наборе открытых данных, файле набора данных или паспорте набора открытых данных.
1.3. Участниками взаимодействия при обработке и использовании открытых данных в АИС ОПОД являются:
1.3.1. Должностное лицо, назначаемое органом государственной власти города Москвы, подведомственной ему организацией, иной организацией, размещающей данные в АИС ОПОД на добровольной основе (далее - Поставщик открытых данных), и уполномоченное принимать решения о раскрытии наборов данных и представлять Поставщика открытых данных по вопросам раскрытия наборов данных (далее - Ответственное лицо).
1.3.2. Представители Оператора, обеспечивающие эксплуатацию АИС ОПОД на постоянной основе (далее - специалисты-операторы АИС ОПОД).
1.3.3. Представители Поставщика открытых данных, обеспечивающие подготовку набора открытых данных к публикации (далее - отраслевые специалисты).
1.3.4. Представители Поставщика открытых данных, осуществляющие взаимодействие со специалистами-операторами АИС ОПОД по техническим вопросам, связанным с публикацией, актуализацией и уточнением набора данных по результатам рассмотрения сообщений посредством обратной связи (далее - специалисты-операторы набора данных).
1.4. Процесс публикации наборов данных и последующего их обновления, приведенный в приложении 1 к настоящему Регламенту, включает следующие процедуры:
1) организационная подготовка деятельности Поставщика открытых данных;
2) выбор набора данных для публикации;
3) подготовка и согласование паспорта и структуры набора данных;
4) подготовка набора данных для публикации;
5) публикация набора данных;
6) обновление и уточнение набора данных.
II. Организационная подготовка деятельности
Поставщика открытых данных
2.1. Руководитель органа исполнительной власти - Поставщика открытых данных определяет Ответственное лицо и несет персональную ответственность за его действия. Фамилия, имя, отчество (при наличии) и контактные данные Ответственного лица фиксируются в Графике публикации открытых данных.
Ответственное лицо организует деятельность по раскрытию наборов данных и взаимодействие Поставщика открытых данных с Департаментом информационных технологий города Москвы.
2.2. Ответственное лицо может самостоятельно вносить предложения по включению того или иного набора данных в График публикации открытых данных. При выборе набора данных для открытия Ответственное лицо в первую очередь должно учитывать следующие критерии:
2.2.1. Набор данных содержит информацию, связанную с исполнением государственных функций или предоставлением государственных услуг.
2.2.2. Данные используются при осуществлении межведомственного взаимодействия.
2.2.3. Данные отражают ход реализации Государственных программ города Москвы (показатели, статистика и т.д.).
2.2.4. Раскрытие набора данных вызвано регулярными обращениями граждан.
2.3. Ответственное лицо Поставщика открытых данных назначает:
2.3.1. Отраслевого специалиста, который осуществляет подготовку выбранного набора к публикации (включая формирование содержательной структуры набора данных).
2.3.2. Специалиста, ответственного за юридическое сопровождение деятельности по раскрытию данных, который осуществляет подготовку заключения о наличии юридической возможности раскрытия набора данных.
2.3.3. Специалиста-оператора набора данных, ответственного за информационно-техническое сопровождение деятельности по раскрытию данных, который осуществляет:
- взаимодействие со специалистом-оператором АИС ОПОД по вопросам публикации, актуализации и уточнения набора данных по результатам рассмотрения сообщений посредством обратной связи;
- оценку необходимости создания автоматического сервиса по выгрузке данных из системы на АИС ОПОД;
- оценку финансовых издержек на создание такого сервиса.
2.4. Ответственное лицо готовит и направляет в Департамент информационных технологий города Москвы предложения по включению в График публикации открытых данных того или иного набора данных только при условии соответствия набора данных всем критериям возможности раскрытия данных:
- формирование набора данных осуществляется силами Поставщика открытых данных или подведомственной ему организации;
- публикация данных не противоречит положениям законодательства Российской Федерации, устанавливающим ограничения на доступ к информации;
- набор данных является полным, точным и достоверным.
Образец заполнения формы Графика публикации открытых данных приведен в приложении 2 к настоящему Регламенту.
III. Подготовка и согласование паспорта
и структуры набора данных
3.1. Специалист-оператор набора данных при участии отраслевого специалиста готовит паспорт набора данных. Паспорт набора данных включает следующие обязательные к заполнению поля:
1) название набора данных;
2) тематическая категория;
3) описание набора данных;
4) владелец данных - Орган исполнительной власти города Москвы (далее - ОИВ);
5) код ОИВ, содержащийся в нормативно-справочной подсистеме автоматизированной системы "Единая система ведения и управления реестрами, регистрами, справочниками и классификаторами" (далее - НСИ АС УР);
6) периодичность предоставления/обновления данных (ежегодная, ежемесячная, еженедельная, ежедневная, по мере поступления), но не реже чем один раз в месяц;
7) информационная система ОИВ, в которой подготовлены данные (при наличии);
8) ключевые слова и словосочетания (не менее семи через запятую);
9) начало отчетного периода опубликованного набора открытых данных;
10) конец отчетного периода опубликованного набора открытых данных;
11) наличие географической привязки данных;
12) режим публикации и обновления (ручной/автоматический).
Пример оформления паспорта набора данных приведен в Приложении 3 к настоящему Регламенту.
3.2. Одновременно с подготовкой паспорта набора данных специалист-оператор набора данных осуществляет подготовку структуры набора данных, которая должна предоставлять пользователям информацию о структуре набора, его модели содержания и типах данных. Пример описания структуры набора данных приведен в приложении 4 к настоящему Регламенту.
3.3. Публикация данных осуществляется преимущественно в формате CSV, в случае публикации данных в формате XML к описанию структуры данных должен прилагаться файл с соответствующим описанием в виде схемы XSD.
3.4. Специалист-оператор набора данных согласует со специалистом-оператором АИС ОПОД паспорт и структуру набора данных.
3.5. Согласованный вариант паспорта набора данных в печатной форме заверяется подписью Ответственного лица Поставщика открытых данных и направляется в Департамент информационных технологий города Москвы.
3.6. Открытые данные должны быть представлены в форме одной плоской денормализованной таблицы, в которой не используются ссылки на данные других таблиц и массивов. Элементы данных в такой денормализованной таблице могут многократно дублироваться.
3.7. Наборы открытых данных готовятся к публикации Поставщиком открытых данных на портале открытых данных в форматах XML или CSV.
XML-документ должен содержать только один корневой элемент.
3.8. При формировании и размещении набора данных в формате CSV необходимо выполнение следующих требований:
- в первой строке должны быть указаны имена полей таблицы;
- запрещается использовать символы перевода строки;
- не допускается наличие полностью повторяющихся и пустых строк;
- в качестве разделителя должен использоваться символ "точка с запятой".
3.9. Значения, содержащие зарезервированный символ "точка с запятой", обрамляются кавычками ("). В случае если в значении встречаются кавычки, они должны быть представлены в файле в виде двух кавычек подряд.
3.10. В целях снижения вероятности ошибок наборы открытых данных должны предоставляться в полном объеме. Все используемые в данных коды справочников и классификаторов должны быть расшифрованы и представлены в отдельных графах.
3.11. Если данные содержат географическую привязку, то для всех объектов в наборе открытых данных она должна быть указана. В паспорте такого набора открытых данных должен быть заполнен признак наличия географической привязки. Данные, содержащие координаты объекта, должны быть отражены в формате WGS84 - трехмерной системы координат для географического позиционирования.
3.12. Данные, содержащие дату, должны быть приведены в формате ДД.ММ.ГГГГ.
IV. Порядок загрузки наборов данных
4.1. При первой загрузке набора данных для размещения специалист-оператор набора данных:
1) при необходимости переводит данные с бумажных носителей в электронный вид формата CSV, а также переводит данные из любых отличных от CSV электронных форматов в формат CSV;
2) направляет заявку на создание учетной записи, утвержденный паспорт, структуру и файл набора данных оператору АИС ОПОД;
3) получает от оператора АИС ОПОД уведомление о предоставлении доступа к работе с автоматизированной системой "Единая система ведения и управления реестрами, регистрами, справочниками и классификаторами" (далее - АС УР) или интегрированной автоматизированной информационной системой "Единое геоинформационное пространство города Москвы" (далее - ИАИС ЕГИП) в зависимости от способа публикации, указанного в паспорте набора данных, а также уведомление о создании структуры каталога набора данных;
4) осуществляет контроль наполнения созданного каталога набора данных посредством пользовательского интерфейса;
5) осуществляет подписание сформированного набора данных электронной цифровой подписью.
4.2. Обновление набора данных осуществляется в соответствии с периодичностью, указанной в паспорте набора данных, а также досрочно по решению Ответственного лица. Досрочное обновление не исключает обновления в соответствии с регулярностью, указанной в паспорте набора данных.
4.3. Обновление наборов данных в зависимости от способа хранения и формата данных может осуществляться одним из следующих способов:
1) в ручном режиме с использованием АС УР;
2) в автоматическом режиме с помощью АС УР;
3) в ручном режиме с помощью ИАИС ЕГИП;
4) в автоматическом режиме с помощью ИАИС ЕГИП.
4.4. При обновлении данных в ручном режиме с использованием АС УР специалист-оператор набора данных:
- готовит набор данных в соответствии с требованиями к формату;
- направляет файл набора данных оператору АИС ОПОД;
- осуществляет контроль наполнения созданного каталога набора данных посредством пользовательского интерфейса;
- осуществляет подписание сформированного набора данных.
4.5. При обновлении данных в автоматическом режиме с использованием АС УР специалист-оператор набора данных при первоначальной публикации набора данных:
- совместно с Департаментом информационных технологий города Москвы обеспечивает интеграцию информационной системы ОИВ с НСИ АС УР с использованием соответствующих сервисов НСИ АС УР;
- при технической поддержке оператора АИС ОПОД проводит тестирование взаимодействия информационных систем с НСИ АС УР;
- переводит сервис в режим промышленной эксплуатации.
В последующем в соответствии с периодичностью, указанной в паспорте набора данных, специалист-оператор набора данных:
- осуществляет контроль автоматического наполнения созданного каталога набора данных посредством пользовательского интерфейса НСИ АС УР;
- осуществляет подписание сформированного набора данных ЭЦП в НСИ АС УР.
4.6. При обновлении данных в ручном режиме с использованием ИАИС ЕГИП специалист-оператор набора данных:
- вносит измененные данные в предыдущую опубликованную версию набора данных с использованием сервиса прямого редактирования на карте;
- осуществляет контроль наполнения созданного каталога набора данных посредством пользовательского интерфейса с помощью пользовательского интерфейса ИАИС ЕГИП;
- осуществляет подписание сформированного набора данных электронной цифровой подписью.
4.7. При обновлении данных в автоматическом режиме с использованием ИАИС ЕГИП специалист-оператор набора данных при первоначальной публикации набора данных:
- согласует с оператором АИС ОПОД технологический регламент публикации наборов данных;
- совместно с Департаментом информационных технологий города Москвы обеспечивает интеграцию информационной системы ОИВ с ИАИС ЕГИП с использованием соответствующих сервисов ИАИС ЕГИП;
- при технической поддержке оператора ИАИС ЕГИП проводит тестирование взаимодействия информационной системы ОИВ с ИАИС ЕГИП;
- переводит сервис в режим промышленной эксплуатации.
В последующем в соответствии с периодичностью, указанной в паспорте набора данных, специалист-оператор набора данных:
- осуществляет контроль автоматического наполнения созданного каталога набора данных посредством пользовательского интерфейса ИАИС ЕГИП;
- осуществляет подписание сформированного набора данных электронной цифровой подписью в ИАИС ЕГИП.
V. Отзыв наборов открытых данных
5.1. В случае возникновения необходимости отзыва набора данных из АИС ОПОД (данные не готовы для размещения в публичном доступе; данные потеряли актуальность) специалист-оператор набора данных направляет письмо с просьбой о временном снятии набора с публикации с указанием даты размещения актуализированного набора на имя заместителя Мэра Москвы в Правительстве Москвы - руководителя Аппарата Мэра и Правительства Москвы.
Приложение 1
к Регламенту обработки открытых
данных в автоматизированной
информационной системе "Общегородская
платформа открытых данных"
ПРОЦЕСС
ПУБЛИКАЦИИ НАБОРОВ ДАННЫХ И ПОСЛЕДУЮЩЕГО ИХ ОБНОВЛЕНИЯ
ОИВ Совместное
Выбирает совещание > Готовит > Контроль Регулярное
наборы данных набор содержания обновление
для публикации данных Предвари- и подпись ЭЦП набора данных
тельный
Предложения Набор просмотр Набор /\
для данных, публикации размещен
публикации паспорт,
> Согласуют и структура
подписывают
ДИТ план-график
Рассматривает Подготовка Окончательная
возможность > Распо- разделов, > публикация
публикации ряжение > предварительная в открытом
публикация доступе
Правитель-
ство
Москвы Оценивает Утверждает
необходимость > > перечень КОНТРОЛЬ
публикации наборов данных ИСПОЛНЕНИЯ
для публикации
Приложение 2
к Регламенту обработки открытых
данных в автоматизированной
информационной системе "Общегородская
платформа открытых данных"
ОБРАЗЕЦ
ЗАПОЛНЕНИЯ ФОРМЫ ГРАФИКА ПУБЛИКАЦИИ ОТКРЫТЫХ ДАННЫХ
N
Название реестра
Атрибут (наименование услуги)
Ответственный ОИВ
Этап I: размещение на сайте ДСЗН до 01.05.2013
Этап II: передача сведений для публикации на портале с 01.05.2013
Период актуализации
Исходный формат хранения
Способ передачи на data.mos.ru
Статус
ЧЧ
МЧ
Карта ЕГИП
Статус
ЧЧ
МЧ
Карта ЕГИП
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
1
Банк данных объектов, доступных для инвалидов
Сведения о доступности объекта для различных категорий инвалидов (лица на креслах-колясках, с нарушением опорно-двигательного аппарата, зрения, слуха)
ДСЗН
Подготовка данных для размещения на сайте
01.05.2013
01.05.2013
01.05.2013
с 01.07.2013 по мере поступления данных
таблица Excel
АС УР
ДИТ
-
-
-
Публикация
01.06.2013
01.06.2013
01.06.2013
Приложение 3
к Регламенту обработки открытых
данных в автоматизированной
информационной системе "Общегородская
платформа открытых данных"
ПРИМЕР
ПАСПОРТА НАБОРА ДАННЫХ
№ п/п
Наименование атрибута
Обязательность заполнения
Пример заполнения
1.
Название набора данных
Да
Перечень выданных субсидий организациям промышленности, науки и инновационной инфраструктуры города
2.
Тематическая категория
Да
Субсидии
3.
Описание набора данных
Да
Перечень выданных субсидий организациям промышленности, науки и инновационной инфраструктуры города
4.
Владелец данных (ОИВ)
Да
Департамент науки, промышленной политики и предпринимательства города Москвы
5.
Код ОИВ (из НСИ АС УР)
Да
5204
6.
Периодичность предоставления/обновления данных (ежегодная, ежемесячная, еженедельная, ежедневная, по мере поступления)
Да
Ежемесячная
7.
Информационная система ОИВ, в которой подготовлены данные (если не имеется, то "данные подготовлены без использования ИС")
Да
Данные подготовлены без использования ИС
8.
Ключевые слова (теги) - не менее двух через запятую
Да
Субсидии, промышленность, наука, предприятия
9.
Начало отчетного периода опубликованного набора открытых данных
Нет
10.
Конец отчетного периода опубликованного набора открытых данных
Да
23.02.2013
11.
Наличие географической привязки
Да
Нет
12.
Режим публикации и обновления (ручной/автоматический)
Да
Автоматический режим с использованием АС УР
Приложение 4
к Регламенту обработки открытых
данных в автоматизированной
информационной системе "Общегородская
платформа открытых данных"
СТРУКТУРА
НАБОРА ДАННЫХ
№ п/п
Имя поля (для отображения в файле CSV) - любые допустимые по требованиям символы (в том числе латиница и/или кириллица)
Наименование (для отображения в человекочитаемом представлении) на русском
Описание (для отображения в разделе "Для разработчиков")
Тип данных
Обязательность (true - для обязательного, false - для необязательного)
Уникальность (true - для уникального, false - для неуникального)
1.
Наименование организации
Наименование организации
Сокращенное наименование организации - получателя субсидии
String
true
false
2.
Название проекта
Название проекта
Название проекта, включая номер и дату начала
String
true
false
3.
Год предоставления финансовой поддержки
Год предоставления финансовой поддержки
Год начала предоставления финансовой поддержки
String
true
false
4.
Сумма субсидии, руб.
Сумма субсидии, руб.
Сумма субсидии в рублях
String
true
false
Требования к файлу - см. http://data.mos.ru/docs/tehtrebovaniya/.
Формат - CSV, кодировка - ANSI, разделитель - точка с запятой (;).
------------------------------------------------------------------