SYSTEM ATLASЗагрузка материала

Slo свежести: правило качества данных

Data Quality Rule Freshness SLO

Это измеримая цель по максимальному возрасту данных между источником, обработкой и доступным потребителю результатом.

Простыми словами

Например, в проекте для «правило качества данных» добавляют проверку «SLO свежести»: конфигурация задаёт порог, автоматизация собирает сигнал, а превышение блокирует продвижение либо переводит систему в заранее описанный безопасный режим. Поэтому заранее определяют правила чтения, записи и восстановления - иначе параллельные операции могут оставить данные в состоянии, которого бизнес не ожидал.

Пример от @Vibeclakr

Пример при разработке

Например, для «правило качества данных» задают понятный порог и автоматическую проверку «SLO свежести». Если порог нарушен, выпуск останавливают или система переходит в заранее выбранный безопасный режим.

Это редакционный пример применения, а не часть определения или доказательство концепции.

Формальное определение

Для «правило качества данных» это измеримая цель по максимальному возрасту данных между источником, обработкой и доступным потребителю результатом. Заранее задают возраст данных и доля нарушений и способ увидеть результат. Если результат нельзя проверить, правило существует только на бумаге.

Механизм действия

Для «правило качества данных» сначала фиксируют исходное состояние, возраст данных и доля нарушений, допустимый порог и действие на случай нарушения. Затем проверяют это в тестах, при выпуске или в работе системы и сохраняют результат.

Пример в работе

Нерабочий подход

Записать «Slo свежести: правило качества данных» в документации и считать работу законченной, не назначив ответственного и не определив, как проверить результат.

Системный подход

Назвать конкретный риск, задать возраст данных и доля нарушений, назначить ответственного и пересматривать правило после значимых изменений.

Ограничения

«Slo свежести: правило качества данных» закрывает только один класс риска. Она не заменяет проверку безопасности, корректности данных, отказоустойчивости и пользовательских последствий.

Источник

NIST, «NIST Big Data Interoperability Framework: Reference Architecture», без даты.

Первоисточник