Webová aplikace pro vyhledávání odcizených předmětů v online bazarech

Antonín Vlček

Web Application for Finding Stolen Items in Online Bazaars

Type of document

bakalářská práce
bachelor thesis

Author

Antonín Vlček

Supervisor

Novák Jiří

Opponent

Guth Ondřej

Field of study

Webové a softwarové inženýrství

Study program

Informatika

Institutions assigning rank

katedra softwarového inženýrství

Rights

A university thesis is a work protected by the Copyright Act. Extracts, copies and transcripts of the thesis are allowed for personal use only and at one?s own expense. The use of thesis should be in compliance with the Copyright Act http://www.mkcr.cz/assets/autorske-pravo/01-3982006.pdf and the citation ethics http://knihovny.cvut.cz/vychova/vskp.html
Vysokoškolská závěrečná práce je dílo chráněné autorským zákonem. Je možné pořizovat z něj na své náklady a pro svoji osobní potřebu výpisy, opisy a rozmnoženiny. Jeho využití musí být v souladu s autorským zákonem http://www.mkcr.cz/assets/autorske-pravo/01-3982006.pdf a citační etikou http://knihovny.cvut.cz/vychova/vskp.html

Metadata

Show full item record

Abstract

Tato práce se zabývá problémy souvisejícími s vyhledáváním odcizených předmětů online implementací systému, který využívá techniky scrapingu k agregování předmětů z online bazarů. Toto řešení umožňuje uživateli prohledávat datovou sadu takto získaných předmětů a nastavit si upozornění, aby obdržel zprávu, když je do datasetu přidána nová položka odpovídající jeho vyhledávacím kritériím. Systém se skládá z více služeb implementovaných docker kontejnery. Tyto služby používají ke komunikaci REST API a toto API je také vystaveno pro použití externím službám. Scraping samotný využívá fronty, které jsou zpracovávány asynchronně pomocí konzumentů postavenými nad frameworkem ReactPHP. Datová sada předmětů je uložena ve fulltextovém vyhledávači Elasticsearch, který poskytuje pokročilé možnosti vyhledávání a je snadno škálovatelný.

This thesis addresses problems associated with searching for stolen items online by implementing a system which scrapes online bazaars and aggregates the postings into one dataset. The solution then allows the user to search through the dataset and set up notifications so that they receive a message when a new item matching their search criteria is added. The system consists of multiple services implemented as docker images. These services use REST API to communicate and this API is also exposed for potential external services to use. Scraping makes use of messaging queues which are being processed asynchronously by consumers built on top of the ReactPHP framework. The dataset of items is stored in Elasticsearch which provides advanced search capabilities and is easy to scale.