Загрузка данных в целевую систему

Материал из m6a
Перейти к: навигация, поиск

Назначение

Перемещение данных, полученных в результате извлечения и преобразования, в целевую систему (базу данных, хранилище данных, приложение и т.д.) для дальнейшего использования.

Использование

  • Заполнение хранилищ данных (Data Warehouses).
  • Интеграция данных между различными системами.
  • Миграция данных.
  • Обновление данных в приложениях.

Уровни

  • Пакетная загрузка: загрузка данных в целевую систему большими пакетами.
  • Потоковая загрузка: загрузка данных в целевую систему по мере их поступления.

Сервисы

  • Разработка скриптов и программ для загрузки данных.
  • Настройка ETL-инструментов.
  • Подключение к целевым системам.
  • Мониторинг процессов загрузки данных.
  • Оптимизация производительности загрузки данных.

Состав

  • Специалисты по ETL.
  • Разработчики ПО.
  • Администраторы баз данных.
  • ETL-инструменты.
  • Инструменты для работы с базами данных.