Přenos stylu na 3D model v reálném čase pomocí neuronové sítě

Abstract

S dnešním vývojem neuronových sítí se stále rozšiřují jejich aplikace. Jednou z nich je přenos výtvarného stylu z jednoho obrázku na druhý. Tedy výsledný obrázek si zachová jasné rysy objektů obsažených v něm, ale změní se jeho barvy a lokální textury. Existuje několik metod s použitím neuronových sítí i bez nich, které tento problém řeší a každá má své výhody i nevýhody. Tato práce je zaměřená na přenos stylu na počítačem vykreslený obrázek 3D modelu. Model se nachází v interaktivní scéně, a proto je potřeba metoda s co nejmenším časem vyhodnocení pro vysokou odezvu. Cílem je vybrat správnou metodu a přizpůsobit výpočet této aplikaci.

With today's development of neural networks, their applications are still expanding. One of them is the transfer of artistic style from one image to another. Thus, the resulting image retains the clear features of the objects contained in it, but changes its colors and local textures. There are several methods with and without use of neural networks that solve this problem, and each has its advantages and disadvantages. This work is focused on style transfer on a computer-rendered image of a 3D model. The model is in an interactive scene, so a method with the shortest possible evaluation time for a high response is needed. The goal is to choose the right method and adapt the calculation to this application.