Розробка веб додатку для опитування користувача за допомогою розпізнавання жестів

Abstract

UA : Робота викладена на 61 сторінці друкованого тексту, містить 31 рисунок, 5 таблиць, 23 джерела, 1 додаток. Об’єкт дослідження: процес розпізнавання жестів. Мета дослідження: розробка веб-додатку для опитування користувача за допомогою розпізнавання жестів. Методи дослідження: методи збору та аналізу вимог до програмного забезпечення, методи моделювання, проектування, конструювання та тестування програмного забезпечення. Предмет дослідження: бібліотека tensorflow.js та її моделі машинного навчання. При розробці додатку був проведений аналіз предметної області, обрано та спроектовано архітектуру системи за допомогою UML у вигляді наборів діаграм варіантів використання, послідовностей, компонентів, розгортання та діяльності, а також було вивчено та проаналізовано наукові статті з теми. Реалізовано підключення та обробку даних машинної моделі HandPose, додано сервіси для обробки жестів, а також розроблено клієнтську частину за допомогою фреймворку Angular та бібліотек Flex-Layout, Angular Material. В результаті роботи отримано веб-додаток, яким користувач може керувати за допомогою жестів рук.

EN : The work is presented on 61 pages of printed text, 31 figures, 5 tables, 23 references, 1 supplement. The object of the study is gesture recognition process. The aim of the study is development of the web application for user survey using gesture recognition. The methods of research are methods of collection and analysis of software requirements, modeling, design, construction and testing of software. The subject of research is the tensorflow.js library and its models of machine learning. In the development the subject area was analyzed, architecture and development tools modules were chosen. System architecture was designed using UML diagrams in a set of use cases, sequences of components and activities, scientific articles on the topic were studied and analyzed as well. The connection and data processing of the HandPose machine model have been implemented, gesture processing services have been added, and the frontend part has been developed using the Angular framework and the Flex-Layout and Angular Material libraries. As a result of work a web application that the user can control with hand gestures was received.