Управление машинным обучением с решением Hitachi Vantara

Компания Hitachi Vantara, дочернее предприятие Hitachi Ltd., объявила о создании новых решений для управления процессами машинного обучения. Они помогут специалистам по обработке и анализу данных тестировать и перестраивать такие модели в сфере производства. Разработки Hitachi Vantara Labs подключаются к конвейеру данных, созданному Pentaho. Это позволяет повысить результативность бизнеса и сократить риски за счет упрощения процесса обновления моделей.

Алгоритмизация – важнейшее конкурентное преимущество в процессе цифровых преобразований, но она несет в себе и потенциальные риски. После запуска модели машинного обучения необходимо постоянно вести ее мониторинг, тестирование и переобучение в соответствии с меняющимися условиями среды, а после этого запускать повторно. Это трудоемкая ручная работа, которая выполняется достаточно редко. Кроме того, после перезапуска модели заметно снижается точность прогнозирования.

Новые возможности управления моделями интеллектуальной обработки данных позволяют усовершенствовать процессы машинного обучения по трем направлениям:

• Быстрый запуск моделей в производственной среде. Новые возможности управления моделями помогают правильно их оценить и повысить точность прогнозирования до запуска модели на производстве. Для дальнейшей настройки операционные группы могут тестировать их с использованием различных методик перекрестной проверки и вневыборочной оценки. Подготовка данных с учетом специфики конкретных алгоритмов теперь выполняется автоматически.

• Повышение точности прогнозов. Как правило, после запуска модели на производстве точность ее показаний снижается по мере поступления новых данных. Избежать этого помогает комплекс оценочных средств, выявляющий модели, которые дают неточные показания. Разнообразные средства визуализации и создания отчетов помогают анализировать качество работы и выявлять ошибки. При любых обновлениях или изменениях можно легко провести A/B-тестирование, сопоставив модели друг с другом.

• Совместная работа и управление операциями в требуемом масштабе. Организации все чаще стремятся повысить прозрачность алгоритмов принятия решений. Новые возможности, которые предлагает Hitachi Vantara, способствуют более эффективному взаимодействию сотрудников, обеспечивают контроль за происхождением данных, а также прозрачность источников данных и ее первичных функций. Подобный уровень прозрачности облегчает совместное использование данных и конвейеров данных командами, стандартизирует алгоритмы и дает возможность их повторного применения.

Новые возможности управления моделями машинного обучения доступны на Pentaho Marketplace, в настоящее время эти модули доступны в тестовом режиме. Следующие версии будут интегрированы в Pentaho Data Integration (PDI).