СУБД Tarantool: гибридная обработка данных в реальном времени
Компания VK объявила о запуске решения для гибридной обработки данных в режиме реального времени. Tarantool Column Store – это колоночная in-memory СУБД, предназначенная для гибридной обработки потоковых данных в оперативной памяти. Решение быстро анализирует наиболее актуальную информацию о транзакциях и уменьшает затраты на перенос массивов в хранилище.
Как поясняют в компании, традиционно в ИТ-инфраструктуре бизнеса транзакционные и аналитические системы отделены друг от друга. Большие потоки данных приходится переносить в витрину или хранилище, после чего информацию можно анализировать, не замедляя операционные процессы. Это снижает актуальность данных и полученных инсайтов, увеличивает издержки бизнеса. In-memory СУБД Tarantool Column Store обеспечивает быструю гибридную обработку транзакций и аналитических запросов в одной системе. Так, для некоторых задач AI требуется скорость обработки данных до 1,5 млн записей в секунду на одном ядре процессора.
Tarantool Column Store помогает работать с финансовыми и производственными данными, консолидировать их, ускорять аналитические запросы и формировать отчетность в режиме реального времени. СУБД гибко масштабирует вычислительные ресурсы, повышает доступность информации и обеспечивает высокую производительность ее обработки. К примеру, с ее помощью финансовые организации могут повысить качество и ускорить работу антифрод-систем, снижая задержку обнаружения подозрительных транзакций практически до нуля. Решение также позволяет увеличить скорость и точность сервисов выдачи кредитов благодаря быстрой оценке риска невозврата.
Tarantool Column Store представляет собой гибридную СУБД с поддержкой как колоночного, так и строчного хранения и обработки данных. Продукт обладает высокопроизводительным векторизованным многопоточным движком выполнения запросов SQL и интегрируется с бизнес-приложениями с помощью JDBC/ODBC/ADBC и HTTP. СУБД может масштабироваться путем кластеризации, репликации и шардирования. Встроенные механизмы сжатия данных в оперативной памяти, а также возможность использования СХД для их архивирования позволяют работать с массивами данных, не помещающимися в оперативную память. Решение совместимо с российскими ОС Astra Linux, РЕД ОС и «Альт».