Architektura distribuovaného systému pro těžení dat z internetu

Abstract

Práce se zabývá analýzou existující architektury systému, který těží a zpracovává data z internetu. Systém začíná narážet na své limity ve výkonnosti, udržovatelnosti, monitorování a DevOps. Hlavní náplní práce je návrh nové architektury na základě analýzy současného stavu. V rámci návrhu nové architektury jsou popsány nároky, které jsou na ni kladeny, architektonické vzory, které dané podmínky a problémy řeší a nakonec samotný návrh nové architektury. V rámci práce vznikne proof of concept, na kterém jsou výsledky práce demonstrovány.

The thesis deals with the analysis of the existing architecture of a system that extracts and processes data from the Internet. The system is starting to hit its limits in performance, maintainability, monitoring and DevOps. The main focus of the work is the design of a new architecture based on the analysis of the current state. As part of the design of the new architecture the demands that are placed on it, the architectural patterns that address the given requirements and problems, and finally the design itself. A proof of concept is created to demonstrate the results of the work.