Ученица одной из столичных школ создала программное обеспечение, которое позволяет управлять персональным компьютером с помощью жестов рук, полностью заменяя традиционные устройства ввода. По информации департамента образования и науки Москвы, технология основана на искусственном интеллекте и компьютерном зрении.
«Технология позволяет отказаться от мыши и клавиатуры — достаточно показывать руку перед камерой», — сообщили в ведомстве.
В основе разработки лежат библиотеки MediaPipe для отслеживания 21 точки на кисти руки, OpenCV для обработки видеопотока и PyAutoGUI для управления курсором и кликами. Программа написана на языке Python в среде PyCharm.
На текущем этапе система способна перемещать указатель, выполнять обычный и двойной клик, а также прокручивать страницы вверх и вниз. Для выхода из программы предусмотрен специальный жест или клавиша «q». Разработка уже прошла тестирование в различных условиях освещения и углов обзора, выявленные ошибки были исправлены.
В перспективе проект может быть дополнен новыми жестами и настройками, адаптированными под конкретного пользователя.
Подписывайтесь на наш Telegram-канал, чтобы быть в курсе всех новостей и событий Рунета.