Интерфейс управления ПК «АксТим» на базе компьютерного зрения

Компания «АксТим» (ex-Accenture) анонсировала прототип альтернативного интерфейса для работы с персональным компьютером. Программа облегчает взаимодействие с ПК людей с дополнительными потребностями.

Некоторым пользователям, поясняют разработчики, сложно управлять компьютером с помощью клавиатуры, мыши или даже специальных технических устройств. Это может быть связано, в частности, с ограниченной подвижностью рук, потерей функциональности одного или нескольких пальцев. В таком случае перемещение между клавишами или передвижение курсора мыши происходят крайне медленно.

Предложенное «АксТим» решение использует для этих целей технологию компьютерного зрения. Десктопное приложение подключается к видеокамере устройства, отслеживает заданные движения пользователя – повороты головы, жесты, манипуляции с предметами – и преобразует их в сигналы управления системой. Таким образом можно печатать, перелистывать страницы, управлять курсором и другими объектами на экране, играть в игры.

Альтернативный интерфейс управления ПК – полностью отечественная разработка, созданная на Python, подчеркивают в «АксТим», в ней применяются только компоненты с открытым кодом – open source инструменты и библиотеки. Прототип был создан всего за месяц. Решение «АксТим» не специализировано для работы с каким-то конкретным ПО, его можно настроить на взаимодействие с любой компьютерной программой.

В перспективе, отмечают в компании, приложение будет учитывать специфику различных классов софтверных продуктов, например, офисных редакторов, обучающих программ. Последнее особенно важно для детей: они смогут более полно взаимодействовать с компьютером без помощи взрослых, сохраняя интерес и мотивацию к учебе.

В «АксТим» полагают, что разработка найдет применение в учреждениях, занимающихся лечением, реабилитацией и досугом людей с дополнительными потребностями: в медицинских центрах, частных клиниках, домах престарелых, коррекционных школах и т. д.