26.08.2026

на главную

Укрощение XBRL

От агрегированных данных к детальным

Регулятор постепенно внедряет датацентричный подход. Подобный опыт можно наблюдать у ФНС в рамках цифровизации налогового мониторинга. На практике это означает, что запрашиваемая информация становится все ближе к первичным учетным данным – примером могут служить сделки с ценными бумагами. Поскольку объем обрабатываемых данных кратно увеличивается, а сроки предоставления информации, напротив, сокращаются, требуется оптимизация существующей технологии. XBRL-CSV 2.0 предлагает упрощенную структуру хранения данных и адаптированные под нее правила контроля качества.

Упрощение

Стандартный XBRL-отчет – это XML-файл, где все показатели (факты) и аналитические признаки (контексты) представлены двумя списками. Без специализированных программных продуктов такой отчет невозможно прочитать, скорректировать и проверить. При этом проверка должна осуществляться по контрольным соотношениям, содержащимся в Таксономии – техническом своде правил регулятора для визуализации и валидации данных. Еще одной особенностью является размер файла c реестровыми формами отчетности – он может достигать десятков гигабайт, поскольку буквально каждый факт характеризуется своим контекстом.

Первый шаг был сделан в 2021 году, когда Банк России предложил для ПУРЦБ и НПФ альтернативный вариант предоставлять формы 0420417, 0420257 и 0420258 в формате XBRL-CSV – табличном CSV-файле, где контекст описывает всю колонку фактов целиком.

Технология XBRL-CSV 2.0 стала закономерным развитием и определила переход к узкоспециализированным таблицам для обработки данных. Для их просмотра не требуются дополнительные вычисления – структуры идентичны, а проверки представляют собой оптимизированные выборки. При этом спецификация XBRL-CSV 2.0 содержит информацию в машиночитаемом виде – SQL-запросы для создания таблиц и выборки значений для контроля качества.

Универсальность – всегда компромисс, имеющий свои пределы, а в случае работы с большими массивами данных – компромисс уже неприемлемый. Поэтому переход к специализации для сокращения временных затрат является истинным упрощением.

Изменения в программных продуктах

XBRL-CSV 2.0 расширяет, но не заменяет стандартную спецификацию XBRL. По-прежнему остается возможность использовать стандартное описание Таксономии с поправкой на локальные изменения формата выгружаемого пакета отчетности. Возможно, эти нюансы будут учтены производителями программных продуктов в очередных обновлениях.

Но это утверждение справедливо только для малого объема информации, исчисляемого тысячами строк. С большим объемом дела обстоят иначе. Доступные на рынке решения в большинстве своем используют парадигму универсального хранилища, и построены на технологических платформах, зачастую не предназначенных для работы с большими данными. А это означает, что распространенный подход с увеличением вычислительных ресурсов не приведет к ожидаемому результату.

И ключевым фактором здесь становится реализация новой архитектуры с использованием соответствующего стека технологий. В целом неважно, как называются такие изменения – обновление или же внедрение нового – технически это должен быть принципиально иной программный продукт. Мы прошли этот путь, выпустив на рынок решение «Хомнет:XBRL-CSV», которое демонстрирует увеличение производительности на порядки при неизменной аппаратной части, и вместе с тем простую интеграцию в существующую инфраструктуру.

Самостоятельный переход и роль ИТ-служб

Перед организациями стоят две задачи. Первая заключается в том, чтобы обеспечить наличие запрашиваемых данных в учетных системах и возможность их автоматизированного сбора. С этим компании часто справляются сами, а сложность зависит от архитектуры систем и качества информации. Вторая задача – собрать, проверить и передать регулятору данные в машиночитаемом виде. Банк России публикует информацию для создания таблиц, настройки проверки данных и структуры пакета, а заполнение таблиц, первичный контроль формата и формирование самого пакета потребуется выполнить самостоятельно. Дополнительно следует обратить внимание на оптимизацию ИТ-окружения, например, по нашим замерам только настройка СУБД под структуру таблиц и запросы сократила время проверки на один-два порядка – десяток минут против нескольких часов.

И это только фундамент. Бизнес-пользователям необходимы мгновенная визуализация и редактирование многострочных таблиц, быстрая проверка с понятным протоколом без технических подробностей и с расшифровкой до конкретных строк таблицы, а также удобная повторная загрузка исправленных данных с последующей перепроверкой – то есть все то, что делает программный продукт комфортным в использовании, без постоянных обращений за помощью к сотрудникам ИТ-служб. Техническим специалистам важно оперативное управление изменениями: обновление структуры хранения, адаптация настроек загрузки, подключение новых проверок, а также следование правилам формирования из нормативной документации Банка России – от контроля допустимых символов до деления пакета на партиции. Реализация такой функциональности – задача другого порядка, требующая соответствующего опыта и ресурсов.

Компетенции как главный ресурс

Ключевым является наличие экспертизы сразу в нескольких направлениях. UX/UI-дизайн – запутанный интерфейс приводит к ошибкам. Администрирование СУБД – отсутствие оптимизации снижает производительность. Проектирование масштабируемых систем – решение только локальной задачи увеличит затраты в дальнейшем. Стоит отдельно отметить, что рост объема данных обусловлен не только деятельностью самих компании, но и поступательным переходом регулятора к сбору детальных данных по каждой из предметных областей, поэтому готовность программного продукта к росту нагрузок – критичный показатель.

Наличие требуемых компетенций должно учитывать экономический эффект. Технология XBRL-CSV 2.0 применима к нескольким сотням компаний. Реализация и последующая поддержка собственными силами требует полной компенсации затрат, в то время как производитель программного продукта за счет тиражирования позволяет сократить издержки, а также консолидировать и распространить экспертизу среди пользователей. Наш опыт показывает, что наиболее продуктивным является совместное сотрудничество, когда компания, в части информационных технологий, фокусируется на основной деятельности, а мы помогаем решать задачи регуляторного характера.

Другие авторы

Журнал «Вестник НАУФОР» - это ежемесячный журнал с познавательными статьями о практике работы на рынке ценных бумаг, обзорами рынка, интервью с ведущими его представителями, материалами конференций рынка ценных бумаг.

Авторами журнала являются профессиональные финансисты: брокеры, управляющие, аналитики, корпоративные юристы, риск-менеджеры, представители инфраструктуры. Зная профессию изнутри, эти люди пишут о том, что действительно является повесткой их рабочего дня. Уровень понимания и анализа конкретных проблем задан принадлежностью авторов к индустрии финансов.

Читателями журнала «Вестника НАУФОР» являются представители госорганов, Банка России, руководители и специалисты финансовых компаний - профучастников рынка ценных бумаг и управляющих компаний, инвестиционные консультанты.

По вопросам приобретения печатной версии издания связываться с Мироновой Татьяной - mironova@naufor.ru