Построение DWH по методологии Data Vault (с модификациями).

Стек технологий

• На данный момент:
  • Модель DWH - Data Vault (модифицированный под потребности)
  • СУБД - PostgreSQL
  • ETL/Orcestrator/Scheduler - Apache NiFi
• В перспективе:
  • СУБД - Postgres Pro
  • Orcestrator/Scheduler - Apache Airflow 2
  • Отчётность - Apache Superset / Metabase

Описание

• Краткая инфографика по сущностям Data Vault
• Бизнесовое описание архитектуры хранилища данных
• Архитектурный план хранилища данных
• Структура хранилища. Описание

Примеры скриптов

СУБД

• Таблицы:
  • Пример хаба (HUB)
  • Пример сателлита (SATELLITE)
  • Пример связи/линка (LINK)
• Процедуры:

ETL

в процессе...

Исходные файлы для подготовки презентаций и описания

• source