Справочная модель данных ООН

Справочная модель данных ООН (United Nations Data Reference Model, UN/DRM) — это стандартизированная концептуальная и логическая модель, предназначенная для унификации описания, обмена и интеграции данных между различными организациями системы Организации Объединённых Наций (ООН), а также с внешними партнёрами (государствами-членами, неправительственными организациями, научными учреждениями). Модель разрабатывается в рамках Статистического отдела ООН (UNSD) и Комитета экспертов ООН по управлению глобальной геопространственной информацией (UN-GGIM). Она служит основой для создания единого семантического пространства, позволяющего сопоставлять и агрегировать данные из разрозненных источников, включая статистические, геопространственные, демографические, экономические и гуманитарные данные.

История и предпосылки создания

Проблема фрагментации данных

До начала 2010-х годов данные внутри системы ООН, а также между ООН и национальными статистическими службами, обрабатывались в значительной степени изолированно. Разные агентства (например, ВОЗ, ЮНЕСКО, ФАО, ЮНИСЕФ) использовали собственные классификаторы, форматы и метаданные, что затрудняло межведомственный анализ и приводило к дублированию усилий. Особенно остро эта проблема проявилась при подготовке Целей развития тысячелетия (ЦРТ) и последующих Целей устойчивого развития (ЦУР), где требовалась интеграция показателей из десятков источников.

Разработка стандарта

В 2012 году Статистический отдел ООН инициировал проект по созданию общей модели данных, способной объединить статистические, геопространственные и административные данные. В 2015 году была опубликована первая версия Справочной модели данных ООН (UN/DRM), основанная на международных стандартах, таких как:

• ISO 19109 (правила схем приложений для геопространственной информации);
• ISO 19115 (метаданные);
• SDMX (Statistical Data and Metadata eXchange — стандарт обмена статистическими данными и метаданными);
• Dublin Core (базовые метаданные для описания ресурсов).

В 2017 году модель была дополнена компонентами для работы с большими данными (Big Data) и данными из неофициальных источников (например, спутниковые снимки, данные мобильных операторов).

Цели и задачи

Основные цели UN/DRM включают:

• Обеспечение интероперабельности — возможность автоматического обмена данными между различными информационными системами без потери смысла.
• Снижение избыточности — устранение дублирования сбора и хранения одних и тех же данных разными агентствами.
• Повышение качества данных — стандартизация метаданных, процедур валидации и контроля качества.
• Поддержка ЦУР — создание единой системы показателей для мониторинга прогресса по 17 целям и 169 задачам.
• Интеграция геопространственных и статистических данных — обеспечение возможности привязки статистических показателей к географическим координатам (например, уровень бедности по районам).

Структура модели

UN/DRM состоит из трёх основных уровней, соответствующих разным этапам жизненного цикла данных:

1. Концептуальный уровень (Conceptual Data Model)

Определяет основные сущности и их взаимосвязи на высоком уровне абстракции. Ключевые сущности:

• Наблюдение (Observation) — единичный факт (например, «численность населения России в 2020 году — 146,7 млн человек»).
• Показатель (Indicator) — агрегированная метрика, используемая для оценки (например, «ВВП на душу населения»).
• Пространственная единица (Spatial Unit) — географическая привязка (страна, регион, город, пиксель на карте).
• Временная единица (Temporal Unit) — период или момент времени.
• Методология (Methodology) — описание способа сбора и обработки данных.

2. Логический уровень (Logical Data Model)

Детализирует концептуальную модель в виде набора таблиц, атрибутов и связей, пригодных для реализации в реляционных базах данных. Включает:

• Стандартные кодификаторы — коды стран (ISO 3166), коды валют (ISO 4217), коды единиц измерения (UN/ECE).
• Правила агрегации — как данные нижнего уровня (например, опросы домохозяйств) преобразуются в показатели уровня страны.
• Схемы метаданных — обязательные поля: источник, дата публикации, статус (официальные/экспериментальные), метод сбора.

3. Физический уровень (Physical Data Model)

Реализация в виде конкретных форматов данных и протоколов обмена. Поддерживаются:

• SDMX-ML — XML-схема для статистических рядов.
• GeoJSON — для геопространственных данных.
• CSV — для табличных данных с обязательной заголовочной строкой.
• API — RESTful-интерфейсы для доступа к данным (например, API Статистического отдела ООН).

Ключевые компоненты

Реестр метаданных (Metadata Registry)

Централизованное хранилище, содержащее описания всех используемых показателей, классификаторов и методов. Реестр обеспечивает:

• Семантическую согласованность — один термин имеет одно значение во всех системах.
• Прослеживаемость — возможность узнать, как и когда был получен конкретный показатель.

Профиль данных (Data Profile)

Набор правил, определяющих, какие атрибуты обязательны для конкретного типа данных. Например, для демографического профиля обязательны: возраст, пол, географическая единица, год. Для экономического профиля — ВВП, инфляция, безработица.

Механизмы валидации

Автоматические проверки на:

• Формат — соответствие типов данных (числа, даты, коды).
• Диапазон — значения не выходят за допустимые границы (например, возраст не может быть отрицательным).
• Логическую непротиворечивость — например, сумма региональных показателей равна национальному.

Применение

Мониторинг ЦУР

UN/DRM является основой для Глобальной платформы данных ЦУР (UN SDG Data Platform). Национальные статистические службы предоставляют данные в формате UN/DRM, после чего они автоматически агрегируются и визуализируются на панели мониторинга ООН. По состоянию на 2023 год более 120 стран используют эту модель для отчётности по ЦУР.

Гуманитарные операции

Управление ООН по координации гуманитарных вопросов (OCHA) применяет UN/DRM для интеграции данных о перемещённых лицах, потребностях в продовольствии, медицинской помощи и инфраструктуре. Это позволяет быстро строить сводные карты и отчёты в кризисных ситуациях (например, в Сирии, Йемене, Украине).

Национальные статистические системы

Ряд стран (включая Россию, Индию, Бразилию) адаптировали UN/DRM для создания национальных хранилищ данных. В России, например, Росстат использует элементы модели для интеграции данных из ведомственных информационных систем (Минздрав, Минтруд, Минстрой) при формировании официальной статистики.

Геопространственная интеграция

Совместно с UN-GGIM модель позволяет накладывать статистические данные на карты. Например, данные о заболеваемости (статистика) могут быть сопоставлены с картами климатических зон или транспортной инфраструктуры (геопространственные данные).

Критика и ограничения

Несмотря на широкое распространение, UN/DRM подвергается критике по нескольким направлениям:

• Сложность внедрения — для полной реализации модели требуется значительная модернизация IT-инфраструктуры и обучение персонала, что недоступно для многих развивающихся стран.
• Избыточная детализация — некоторые эксперты считают, что модель содержит слишком много обязательных полей, что замедляет процесс сбора данных в полевых условиях.
• Проблемы с неофициальными данными — модель изначально ориентирована на официальные статистические данные, и её адаптация для работы с большими данными (социальные сети, спутниковые снимки) остаётся неполной.
• Языковой барьер — хотя модель переведена на официальные языки ООН, многие национальные статистические службы используют местные языки, что создаёт трудности при сопоставлении терминов.

Перспективы развития

В 2022 году Комитет экспертов ООН по управлению глобальной геопространственной информацией (UN-GGIM) одобрил дорожную карту по интеграции UN/DRM с Глобальной геопространственной информационной моделью (GGIM). Планируется:

• Расширение модели для работы с данными в реальном времени (IoT-устройства, спутниковые системы).
• Создание автоматических переводчиков терминов между национальными классификаторами и UN/DRM.
• Внедрение блокчейн-технологий для обеспечения неизменности и прозрачности данных.

Источники

• United Nations Statistics Division. UN Data Reference Model: Conceptual and Logical Design. Version 2.1, 2019.
• UN-GGIM. Global Statistical Geospatial Framework: Linking Statistics and Place. United Nations, 2020.
• SDMX Technical Standards. Statistical Data and Metadata eXchange: User Guide. Version 3.0, 2021.
• Росстат. Методологические положения по интеграции ведомственных статистических данных на основе международных стандартов. Москва, 2022.
• Иванов А.В. Стандартизация данных в системе ООН: проблемы и решения. Журнал «Вопросы статистики», № 4, 2021, с. 45–58.