В процессе трансформации был произведен отказ от платформы Qlik Sense в пользу решений Loginom, ClickHouse и Analytic Workspace. Это позволило создать более гибкую и масштабируемую архитектуру.
Loginom стал центральным элементом инфраструктуры, выполняя функции от извлечения данных до построения моделей данных.
Для автоматизации процессов было интегрировано готовое решение Data Monetization Pack. Оно позволило внедрить единые стандарты работы с данными для аналитиков и бизнес-пользователей, а также упростить передачу данных в другие подразделения. Вместо использования SQL, Git, JavaScript, DBT, OpenMetadata, Apache Airflow все функции были объединены в одну low-code платформу Loginom и решение на ее основе Data Monetization Pack.
В рамках начального этапа была осуществлена полная адаптация объемных скриптов Qlik Sense в сценарии Loginom. Это позволило перенести хранение данных в ClickHouse и обеспечить визуализацию с использованием любых BI-систем.
Производительность обработки сценариев в Loginom (скриншот одного из сценариев представлен ниже) оказалась на 50% выше, чем в скриптах Qlik Sense, что значительно ускорило обработку данных.