SAGElab - ovládání gesty prostřednictvím Kinect 2.0

Abstract

Cílem této bakalářské práce bylo prostudovat existující technologie využívající hloubkové senzory a detekci gest a aplikovat získané vědomosti při návrhu řešení ovládání gesty pro vizualizační prostředí SAGE2 za pomocí zařízení Microsoft Kinect 2.0. Návrh řešení bral v úvahu reálné nasazení v SAGElab, síťové a multimediální laboratoři na Fakultě informačních technologií Českého vysokého učení technického v Praze. V práci byl kladen důraz na vytvoření přirozeného uživatelského rozhraní za použití gest rukou. Na základě návrhu byl vytvořen prototyp aplikace, který byl prověřen testy použitelnosti pro získání zpětné vazby z reálného použití. Implementované návrhy obdrželi pozitivní hodnocení ze strany uživatelů a ukázaly velký potenciál této technologie. Výsledek této práve je velmi komplexní prototyp aplikace bezdotykového ovládání SAGE2 a stěny displejů v SAGElab, clusteru 20 displejů o celkovém rozlišení 9600 x 4320 px. Výsledky experimentu také poskytují hodnotnou zpětnou vazbu pro mou budoucí práci v oblasti počítačového vidění a interakce člověka s počítačem a také pro práci všech výzkumníků a studentů kteří se zajímají o tuto oblast.

The goal of this bachelor's thesis was to research current technologies which use depth sensors and gesture detection, and to collect interesting ideas and apply them to design a gesture control solution for SAGE2 with the use of Microsoft Kinect 2.0. The design was taking into consideration a practical usage of SAGE2 in SAGElab - networking and multimedia laboratory at administrated by CESNET and FIT and FEL at Czech Technical University in Prague. The focus while designing the solution was to create a natural user interface with the use of hand gesture detection. To verify the usability of the suggested solution, I created an application prototype, implemented according to the before mentioned design, and performed usability testing on the prototype to receive feedback from practical usage. The ideas implemented in this solution received a positive feedback from the users and overly performed well. The main outcome of the testing was, that this technology has a lot of potential and even the prototype application showed insteresting results. The result of this thesis, is a very complex prototype application, which enables users to control SAGE2 and thus the display wall in SAGElab, a cluster of 20 displays with total resolution of 9600 x 4320 px. The results of the experiments provide a valuable feedback for my future work in the area of computer vision and human-computer interaction and for future work of other researchers and students interested in this area.