Автоматизация наполнения данными гибридного хранилища данных
Здесь представлены файлы bash для автоматизации чтения данных из MS SQL Server в слой STG, а далее из слоя STG в квартальные партиции слоя RAW минимального жизнеспособного (MVP) гибридного хранилища данных (Data Lakehouse)…
Автоматизация управления жизненным циклом партиций слоя RAW гибридного хранилища данных
Здесь представлены файлы bash для автоматизации управления жизненным циклом партиций (архивация и восстановление) слоя сырых данных RAW минимального жизнеспособного (MVP) гибридного хранилища данных (Data Lakehouse) на основе PostgreSQL. Содержание: Скрипт файла archive_raw_partition.sh для…
Автоматизация создания слоя RAW гибридного хранилища данных
Здесь представлены файлы bash для автоматизации создания слоя сырых данных RAW с архивируемыми партициями на отдельных отмонтируемых сегментах диска минимального жизнеспособного (MVP) гибридного хранилища данных (Data Lakehouse) на основе PostgreSQL. Содержание: Скрипт файла create_raw.sh для создания слоя…