Единая платформа VK Tech для работы с данными

Компания VK Tech запустила VK Data Platform – универсальную платформу для комплексной работы с большими объемами данных, нейросетями и ИИ. Она должна помочь крупному бизнесу ускорить обработку, управление, обогащение и анализ данных. Также платформа позволит быстро внедрять алгоритмы ИИ и нейросети в бизнес. Платформа ориентирована на банковский сектор, ритейл и электронную коммерцию, транспорт, логистику, телекоммуникации и промышленность.

VK Data Platform – единое окно управления данными компании, которое включает 16 готовых инструментов. Платформа решает широкий спектр задач: от хранения и обработки до решения аналитических задач и процесса разработки моделей машинного обучения.

В основе Data Platform лежат собственные разработки VK, такие как Tarantool и S3-совместимое хранилище Cloud Storage. В платформу также включены другие технологии, ставшие стандартом для индустрии: PostgreSQL, Trino, Airflow. Ряд инструментов платформы доступен в облаке VK Cloud и опробован на реальных проектах российских компаний. Среди них Cloud Storage (S3-хранилище), Cloud Kafka, Cloud Spark, Cloud Flink и Cloud ML Platform.

Платформа может быть развернута на различных типах инфраструктуры, включая публичные и частные облака, а также собственные серверы компании. В ней предусмотрены типовые архитектуры на основе современных подходов, что позволяет быстро адаптировать ее под задачи компании и ускорить интеграцию решения в корпоративный ИТ-ландшафт. Компоненты VK Data Platform разворачиваются на основе Kubernetes, что позволяет динамически распределять вычислительные мощности, эффективно утилизировать аппаратное обеспечение и обеспечивать высокий уровень отказоустойчивости.