Обеспечение качества и консистентности данных

Материал из m6a
Перейти к: навигация, поиск

Назначение

Гарантия соответствия данных требованиям качества (полнота, точность, актуальность, непротиворечивость) и обеспечение их целостности и непротиворечивости в различных системах.

Использование

  • Создание надежных хранилищ данных (Data Warehouses).
  • Принятие обоснованных бизнес-решений на основе достоверных данных.
  • Улучшение качества данных в приложениях.
  • Снижение рисков, связанных с использованием недостоверных данных.
  • Обеспечение соответствия нормативным требованиям.

Уровни

  • Базовый уровень: проверка данных на соответствие основным правилам и ограничениям.
  • Продвинутый уровень: проведение сложных проверок данных, выявление дубликатов и противоречий.
  • Проактивный уровень: предотвращение попадания некачественных данных в системы.

Сервисы

  • Профилирование данных.
  • Очистка данных.
  • Стандартизация данных.
  • Дедупликация данных.
  • Валидация данных.
  • Мониторинг качества данных.
  • Управление мастер-данными (MDM).

Состав

  • Специалисты по качеству данных.
  • Разработчики ПО.
  • Аналитики данных.
  • Инструменты для профилирования, очистки и валидации данных.
  • Системы управления мастер-данными (MDM).