Больше, чем просто схема: Схема NIEM и появление государственной семантической инфраструктуры, часть 1

Данный пост эксперта в области управления электронными документами, эксперта ИСО от США Энди Поттера (Andy Potter - на фото) был опубликован 22 мая 2026 года в социальной сети Substack.

В настоящее время в Международной организации по стандартизации (ИСО) циркулирует документ, о котором вне государственных ИТ-структур не слышал почти никто. Это проект стандарта ISO/IEC CD 26631, объём которого составляет сотни страниц. В нем с необычайной точностью определяются такие, например, понятия, как «лицо» (Person), «инцидент» (Incident), «адрес» (Address), «оружие» (Weapon) и «категория биометрических данных» (BiometricDataCategory).

Если говорить без прикрас, то это список терминов.

Мой комментарий: Речь идёт о документе ISO/IEC CD 26631 «Информационные технологии – Стандарт OASIS «Модель NIEM» версии 6.0» (Information technology — NIEM Model v6.0 OASIS Standard), см. https://www.iso.org/standard/94541.html , над которым работает Объединённый технический комитет ИСО/МЭК JTC1 «Информационные технологии».

 

 

Содержание стандарта следующее:

1. Введение

1.1. Изменения по сравнению с предыдущими версиями
1.2. Глоссарий

2. Модель NIEM

2.1. Содержание
2.2. Архитектура NIEM

3. Соответствие стандартам
Приложение A: Ссылки
Приложение B: Благодарности
Приложение C: Редакция

Данный документ также (в зависимости от того, как Вы его воспринимаете) является одним из самых влиятельных документов по информационной архитектуре, созданных в 21-м веке – это прямой институциональный ответ на катастрофу, развивавшийся в течение двух десятилетий и теперь встраиваемый в постоянную инфраструктуру международного стратегического управления. 

Ученые, изучающие семантическую сеть, HL7 (международные стандарты обмена информацией между медицинскими информационными системами – Н.Х.) и FHIR (стандарт «Ресурсы для быстрого обеспечения интероперабельности в здравоохранении» (Fast Healthcare Interoperability Resources) организации HL7, см. https://ecqi.healthit.gov/fhir/about - Н.Х.) в здравоохранении, рекомендации W3C (это Консорциум Всемирной паутины W3C (The World Wide Web Consortium), http://www.w3.org/ - международное сообщество, разрабатывающее открытые стандарты, обеспечивающие развитие интернета в долговременной перспективе – Н.Х.) и RDF (Resource Description Framework – правила описания ресурсов, сформулированные в официальной рекомендации консорциума W3C для семантических моделей веб-данных – Н.Х.), наверное, с таким утверждением не согласились бы - и они не были бы неправы. Но они бы вступили в полемику, что. собственно, и являлось целью сказанного :)

Итак, поговорим об истории схемы NIEM.

История до атаки на башни Всемирного торгового центра 9 сентября 2001 года

Чтобы понять причины существования NIEM, необходимо понять специфические аспекты провала в деятельности американской разведки в годы, предшествовавшие террористической атаке 11 сентября 2001 года.

Главной проблемой не был какой-либо провал в сборе информации. Американское разведывательное сообщество за несколько месяцев до терактов собрало фрагменты информации, которые – если их правильно собрать - указывали на грядущие события. Боевики «Аль-Каиды» находились в США. Некоторые из них прошли курсы пилотирования самолётов. Были задокументированы конкретные предупреждения.

Выводы Комиссии по расследованию событий 11 сентября были точными и изобличающими: необходимая информация имелась, однако системы были не способны взаимодействовать друг с другом. ФБР использовало свои базы данных, отличные от баз данных ЦРУ. Правоохранительные органы штатов и местных органов власти работали в совершенно разных информационных средах. «Объект оперативного интереса» (Person of Interest) в одной системе не был надежным образом связан с «объектом оперативного интереса» в другой системе. Система понятий американских структур безопасности была похожа на Вавилонскую башню, и сюжет происходящих событий оказался именно в «промежутках между башнями».

Именно тогда зародилась идея схемы NIEM, хотя на её создание ушли годы.

Первая реакция была технической: Министерство юстиции (Department of Justice) без лишнего шума разрабатывало нечто под названием «Глобальная XML-модель данных для правосудия» (Global Justice XML Data Model) - единый словарь, специально предназначенный для юридического сообщества. Когда в хаотичные месяцы, последовавшие за терактом 11 сентября 2001 года, было создано Министерство внутренней безопасности (Department of Homeland Security, DHS), у того возникли свои собственные проблемы с данными: 22 федеральных органа исполнительной власти, каждое из которых использовало свои системы, внезапно объединились в одно министерство, и от них ожидался беспрепятственный обмен информацией – чего они в тот момент не могли сделать.

В феврале 2005 года директора по информационным технологиям Министерства юстиции и Министерства внутренней безопасности подписали меморандум о взаимопонимании. «Национальная модель обмена информацией» (National Information Exchange Model, NIEM) была официально введена два месяца спустя.

Идея была прямолинейной, хотя её реализация и оказалась непростой: создать общий стандартизированный словарь для государственных данных. Речь шла не о какой-то одной системе, которой все должны пользоваться - это никогда не сработало бы ни в политическом, ни в техническом плане - а об общем словаре, своего рода «Розеттском камне», которым может воспользоваться любая система, когда ей нужно отправить данные в любую другую систему.

Затем разразился ураган

Едва успели высохнуть чернила на документах о создании NIEM, как 29 августа 2005 года на побережье США обрушился ураган «Катрина» (Katrina).

Последствия этого стихийного бедствия хорошо задокументированы, и эти материалы по-прежнему тяжело читать. Погибло более 1800 человек, ущерб составил 100 миллиардов долларов. Новый Орлеан затапливало, в то время, как руководители федерального агентства США по чрезвычайным ситуациям (Federal Emergency Management Agency, FEMA) ждали прояснения ситуации, которое так и не случилось.

По итогам анализа, проведенного по окончании чрезвычайной ситуации, были получены недвусмысленные выводы. Федеральные органы, органы штатов и муниципальные органы имели планы обмена информацией. Они располагали ресурсами. Теоретически, у них имелись механизмы координации. Чего им не хватало, так это надёжного способа обмена оперативной информацией в режиме реального времени через границы юрисдикций и организаций.

Расследование, проведенное Палатой представителей Конгресса США, выявило полномасштабный сбой в обмене информацией, парализовавший командование и управление. Органы власти были не в состоянии сообщить друг другу, где находятся ресурсы, кому что нужно, и кто отвечает за тот или иной аспект реагирования. Проблема с данными, которая не позволила предотвратить теракты 11 сентября 2001 года, на этот раз способствовала затоплению крупного американского города.

Ураган «Катрина» сделал для схемы NIEM нечто важное: дискуссия перешла из абстрактной в реальную плоскость. Интероперабельность перестала быть технической проблемой для ИТ-отделов, и стала фактором, определяющим, кто выживет, а кто погибнет в случае сбоев в работе инфраструктуры.

Министерство обороны США начало использовать схему NIEM в 2013 году. Министерство здравоохранения и социальных служб США (Department of Health and Human Services) присоединилось к управляющему совету NIEM в 2009 году. Модель развивалась, охватывая область за областью – такие области, как иммиграция, биометрия, военные операции, управление чрезвычайными ситуациями, защита инфраструктуры. К моменту достижения зрелости она содержала более 20 тысяч согласованных элементов данных, каждый из которых был результатом переговоров между ведомствами с разной культурой, разными системами и зачастую совершенно разными интересами в плане формального определении элементов информации.

Словарь имеет политический подтекст

Есть один аспект, который редко упоминается в технической документации, но при этом имеет огромное значение для любого, кто всерьез задумывается о стратегическом управлении информацией.

Каждое определение в едином стандарте данных - это выбор. Когда NIEM определяет, какие поля данных относятся к записи о «лице», он принимает онтологическое решение о том, что представляет собой «лицо» в контексте обмена данными между государственными и муниципальными органами. Когда определяется понятие «инцидент», принимается решение о том, что считается инцидентом, какими характеристиками он обладает и с чем он взаимосвязан.

Всё это не нейтральные действия. Так, стандарт, определяющий, каким образом структурируются данные правоохранительных органов, неявным образом определяет, какие закономерности могут быть обнаружены в этих данных, какие виды автоматизированных решений могут быть приняты, и кого и каким образом «видит» государство.

Здесь особое вес имеет область правосудия - самая большая и наиболее развитая в NIEM. Когда полицейское управление из одной юрисдикции обменивается записью «арест лица» (SubjectArrest) с судебной системой в другой юрисдикции, то каждое поле данных в рамках этого обмена регламентируется определением, которое было разработано, обсуждено и согласовано комитетом. Сделанные комитетом выбор теперь находит отражение в инфраструктуре; и такого рода решения будут продолжать работать спустя длительное время после того, как уйдут из жизни принявшие их люди

Это, в самом точном смысле слова, архивная работа. Решения, принимаемые этими органами по стандартизации, касаются того, как сведения о настоящем буду понятны в будущем.

(Окончание следует)

Эндрю Поттер (Andrew Potter)

Источник: сайт Substack / сайт NIEM / сайт OASIS Open
https://metaarchivist.substack.com/p/more-than-a-schema 
https://niemopen.org/news/niem-a-new-open-project-18-years-in-the-making/
https://docs.oasis-open.org/niemopen/niem-model/v6.0/os/niem-model-v6.0-os.pdf
https://docs.oasis-open.org/niemopen/niem-model/v6.0/niem-model-v6.0.html