ЗАКАЗЧИК
Международная логистическая компания
ДЛИТЕЛЬНОСТЬ ПРОЕКТА
декабрь 2022 по настоящее время
ОПИСАНИЕ СИТУАЦИИ ДО СТАРТА ПРОЕКТА
Ведение отчетов в Microsoft Access
ЗАДАЧА
В рамках локализации отчетности Заказчику требуется развернуть и отладить совместную работу основных компонентов аналитической платформы (далее Платформа) на определенном наборе отчетов (далее Отчеты). Выполненная в рамках данного задания работа позволит создать Платформу в необходимом объёме.
ИСПОЛЬЗУЕМЫЕ РЕШЕНИЯ (ОБЛАСТИ)
Компоненты MVP:
1. ObjectStorage
2. DataTransfer
3. Postgres
4. Apache NiFi
5. Datalens
БЫЛО СДЕЛАНО
Целевая Функциональная архитектура Платформы должна позволять решать 3 основные задачи:
1. Оперативная отчетность в ситуациях, когда бизнес-системы не справляются с нагрузками (теряют производительность при построении отчетов) и/или не содержат всей полноты оперативных данных;
2. Исторический анализ, KPI, план/факт/прогноз;
3. Являться источником данных для внешних систем.
Для обеспечения возможности решения указанных выше задач Платформа должна состоять из:
· Landing Layer – слой промежуточного хранения данных, поступающих из систем источников в виде файлов
· Staging Layer – слой сырых данных;
· Data products – набор доменных моделей, которые могут включать
o DWH Layer – основной слой хранения данных;
o Data Mart Layer– слой витрин данных для построения аналитических отчетов;
o Export Layer – источник данных для внешних систем.
Созданы функциональные компоненты Landing Layer + Staging Layer (далее Staging Area), Data products, в объеме необходимом для построения Отчетов, развернутых в продуктивной среде. Это позволяет решать задачу №1 в части обеспечения отчетами, для которых целевые бизнес-системы не обладают всей полнотой данных.
РЕЗУЛЬТАТ
- Среда продуктивного использования с формирующимися отчетами;
- Слой хранилища Staging Area наполняемый из исторических и целевых источников, данными необходимыми для построения Отчетов;
- Слой хранилища DataMart, обеспечивающий формирование Отчетов на данных из исторических и целевых источников;
- Отчеты в Datalens;