Detekce zboží v ruce zákazníka pomocí analýzy snímků z termokamery

Abstract

Tato práce se zabývá detekcí zboží v ruce zákazníka pomocí analýzy snímků z termokamery. Kamera je umístěna nad regálem, kde snímá oblast bezprostředního dění před ním. Snímaná data z kamery obsahují informace o teplotách jednotlivých předmětů na scéně. Pomocí teplotních dat je následně možné na snímcích segmentovat ruku a zkoumat, zda se na scéně vyskytuje zboží. Cílem práce je průzkum možných řešení této úlohy, návrh vlastního řešení a následně jeho implementace. V práci je k problému přistupováno více způsoby a je navrženo několik možných řešení. Pro snímání dat je použita termokamera FLIR A65 se sadou nástrojů eBUS SDK. Algoritmy jsou implementovány v jazyce Java s využitím knihovny OpenCV. Vyhodnocený algoritmus dynamického odčítání pozadí dosahuje celkové klasifikační přesnosti 88 %.

This thesis deals with the detection of goods in the customer's hand by analyzing images from infrared camera. The camera is located above the shelf, monitoring behavior of the customer standing in front of it. Acquired data contains informations about the temperature of the objects in the view. Using these temperature data, it is possible to segment hand and examine the presence of the goods on the scene. The aim of the thesis is to explore possible solutions of this task, to propose a solution and subsequently implement it. There are several approaches to the problem and several possible solutions are proposed. The FLIR A65 thermal camera with the eBUS SDK tool is used to capture data. The algorithms are implemented in Java using the OpenCV library. The evaluated background subtraction algorithm achieves an overall classification accuracy of 88 %.