Sběr telemetrických dat, jejich analýza a representace
Telemetry Data Collection, Analysis and Representation
Typ dokumentu
bakalářská prácebachelor thesis
Autor
Tomáš Zámostný
Vedoucí práce
Bešťák Robert
Oponent práce
Hlaváček Jiří
Studijní program
Elektronika a komunikaceInstituce přidělující hodnost
katedra telekomunikační technikyPráva
A university thesis is a work protected by the Copyright Act. Extracts, copies and transcripts of the thesis are allowed for personal use only and at one?s own expense. The use of thesis should be in compliance with the Copyright Act http://www.mkcr.cz/assets/autorske-pravo/01-3982006.pdf and the citation ethics http://knihovny.cvut.cz/vychova/vskp.htmlVysokoškolská závěrečná práce je dílo chráněné autorským zákonem. Je možné pořizovat z něj na své náklady a pro svoji osobní potřebu výpisy, opisy a rozmnoženiny. Jeho využití musí být v souladu s autorským zákonem http://www.mkcr.cz/assets/autorske-pravo/01-3982006.pdf a citační etikou http://knihovny.cvut.cz/vychova/vskp.html
Metadata
Zobrazit celý záznamAbstrakt
Cílem této práce je vyhledávat, analyzovat a vizualizovat telemetrická data v reálném čase a protokolovat data z různých serverů za pomoci open-source nástrojů jako je Elasticsearch, Logstash a Kibana. Je komplikované sbírat data umístěná na mnoha různých serverech, vzhledem k množství dat, které se zvyšuje s velikostí sítě. Práce pojednává o konceptech centralizované telemetrie, a hledá vhodnou variantu ze stávajících softwarových řešení, aby bylo možné hledat a analyzovat problémy na serverech za delší časové období. Takové řešení je přínosné a klíčové v prostředí, které se skládá z velkého množství serverů a generuje stovky terabajtů dat denně. V dalších kapitolách se věnuji výhodám sběru a analýzy všech telemetrických dat z našeho vytvořeného systému. Konečné nastavení fungovalo správně a nevyžadovalo žádná další vylepšení našeho systému. This thesis aims to search, analyse, and visualise real-time data in telemetry and log data from various servers using open source products such as Elasticsearch, Logstash, and Kibana. The log and data located on several different processing machines can be challenging to handle as the volume of data increases with the scale of software systems, networks, and services. This thesis discusses the concepts of centralised logging, telemetry, and existing software solutions for implementing such a system. It also allows you to search for problems across multiple servers by connecting their telemetry data over a specific period. These operations are valuable and essential in an environment with hundreds of containers producing terabytes of data per day. This thesis discusses the benefits of collecting and analysing all telemetry data from the newly created system. The finished framework and additional results from the implementation process are also described. The final setup worked well and did not necessitate any improvements to our system.
Kolekce
- Bakalářské práce - 13132 [205]