ПРИМЕНЕНИЕ СИСТЕМЫ РАСПОЗНАВАНИЯ ЖЕСТОВ ДЛЯ ВЗАИМОДЕЙСТВИЯ С ЦИФРОВЫМИ УСТРОЙСТВАМИ И ТЕХНОЛОГИЯМИ
В статье рассматривается применение системы распознавания жестов рук, основанной на комбинированном использовании глубинного сенсора RealSense D435, web-камеры для захвата жеста и предварительно обученной сверточной нейронной сети с архитектурой VGG-16 для выделения признаков и классификации объектов, для взаимодействия с голосовым помощником, устройством IoT и человеко-компьютерным интерфейсом. Приведены образцы распознаваемых системой жестов и блок-схема алгоритма работы системы. Также приведена программная реализация модуля, предназначенного для взаимодействия с устройствами IoT и человеко-компьютерным интерфейсом на языке Python 3.11. Приведены примеры использования системы пользователем для взаимодействия с Yandex Alice, управления презентацией PowerPoint и для управления работой контроллера, который включает и выключает светодиод.
Сведения
- Журнал
- Вестник КазАТК
- Опубликовано
- 2023 · Т. 129, № 6, С. 145-154
- Язык
- Русский
- ISSN
- 1609-1817 · 2790-5802
- Издатель
- JSC Academy of Logistics and Transport