Решение «ДАР» для создания платформ данных

Компания «ДАР» (входит в ГК «КОРУС Консалтинг») представила решение Korus Data Framework, которое помогает внедрять платформы данных, используя открытые и импортонезависимые технологии.

Среди задач, которые может решать Korus Data Framework (KDF), – управление метаданными при проектировании и разработке хранилищ данных и аналитических систем, а также управление релизами и процессами CI/CD. С помощью решения можно готовить данные, обеспечивать их качество и разрабатывать регламентные ETL/ELT-процессы, что способствует экономии ресурсов при внедрении дата-платформы. Наличие преднастроенных сред разработки сокращает время, которое требуется для реализации нового решения. В результате использования KDF, поясняют в  компании, заказчики получают развернутую инфраструктуру и унифицированные подходы к развитию платформы данных.

KDF состоит из нескольких модулей, в числе которых набор шаблонов для работы с источниками данных, оркестрации и внедрения хранилища данных по разным методологиям (Data Vault, Snowflake, 3NF). За счет используемых технологий open source, таких как Airflow, S3, Greenplum, Clickhouse, dbt, Trino, KDF позволяет реализовать платформу данных и как классическое хранилище, и как решение класса Lakehouse.

Решение KDF доступно в облачном варианте; его также можно интегрировать во внутреннюю ИТ-инфраструктуру компании с возможностью использования Kubernetes для контейнеризации, управления сервисами и горизонтального масштабирования.