Central AsianResearch Index

ПРИМЕНЕНИЕ СИСТЕМЫ РАСПОЗНАВАНИЯ ЖЕСТОВ ДЛЯ ВЗАИМОДЕЙСТВИЯ С ЦИФРОВЫМИ УСТРОЙСТВАМИ И ТЕХНОЛОГИЯМИ

В статье рассматривается применение системы распознавания жестов рук, основанной на комбинированном использовании глубинного сенсора RealSense D435, web-камеры для захвата жеста и предварительно обученной сверточной нейронной сети с архитектурой VGG-16 для выделения признаков и классификации объектов, для взаимодействия с голосовым помощником, устройством IoT и человеко-компьютерным интерфейсом. Приведены образцы распознаваемых системой жестов и блок-схема алгоритма работы системы. Также приведена программная реализация модуля, предназначенного для взаимодействия с устройствами IoT и человеко-компьютерным интерфейсом на языке Python 3.11. Приведены примеры использования системы пользователем для взаимодействия с Yandex Alice, управления презентацией PowerPoint и для управления работой контроллера, который включает и выключает светодиод.

Сведения

Опубликовано
2023 · Т. 129, № 6, С. 145-154
Язык
Русский
ISSN
1609-1817 · 2790-5802
Издатель
JSC Academy of Logistics and Transport