Система розпізнавання команд за допомогою читання з губ

Дипломна робота: 110 с., 28 рис., 7 табл., 2 додатки, 25 джерел. Метою роботи є розробка додатку, що зчитує команди, сказані людиною, з камери в реальному часі, та вивід цих команд на екран. У дослідженні проаналізовано методи глибокого навчання, та застосовано деякі математичні підходи. Результати роботи: - розроблено додаток, що працює в режимі реального часу - розроблено алгоритм детекції пауз між різними фразами - реалізовано інтерфейс користувача для даного додатку Додаток використовується у сферах, де немає можливості застосувати аудіо-обробку.Theme of work: "System of commands recognition using lipreading". Thesis contains 110 p., 28 fig., 7 tabl., 2 appendices and 25 sources. The purpose of the work is to develop an application that reads the commands spoken by a person from the camera in real time, and displays these commands on the screen, or perform actions that correspond to them. The study analyzed the methods of deep learning, and applied some mathematical approaches. Results of work: - A real-time application is developed - an algorithm for detecting pauses between different phrases has been developed - The user interface for this application is implemented The application is used in areas where it is not possible to apply audio processing