Zpracování velkých dat z rozsáhlých IoT sítí

Název anglicky

Big Data Processing from Large IoT Networks

Jazyk práce

český

Abstrakt

Cieľom tejto diplomovej práce je návrh a vytvorenie systému pre zber, spracovanie a ukladanie dát z rosiahlych IoT sietí. Vytvorený systém predstavuje komplexné riešenie, umožňujúce spracovanie dát z rôznych IoT sietí, s využitím Apache Hadoop ekosystému. Dáta sú spracované v reálnom čase a ukladané do NoSQL databázy, ale ukladajú sa dáta aj do súborového systému pre prípadné neskoršie spracovanie. Systém je optimalizovaný a testovaný na dátach zo siete IQRF. Dáta uložené v NoSQL databázi sa vizualizujú a vykonávajú sa predikcie v pravidelných intervaloch. Používateľ je prepojený s týmto systémom cez informačný systém, kam mu v prípade hodnôt mimo rozsah chodia notifikácie.

Klíčová slova

BigData, IoT, Apache, Hadoop, databáza, NoSQL, distribuovaný súborový systém, Java, real-time, HDFS, Flume, Spark, informačný systém, OpenTSDB, Grafana, HBase, Avro, dávkové spracovanie, lineárna regresia, predikcie, Ambari, IQRF

Ústav

Ústav počítačových systémů FIT VUT v Brně

Studijní program

Informační technologie, obor Informační systémy

Soubory

Stav

obhájeno, hodnocení B

Obhajoba

20. června 2019

Oponent

Podivínský Jakub, Ing., Ph.D.

Průběh obhajoby

Student nejprve prezentoval výsledky, kterých dosáhl v rámci své práce. Komise se poté seznámila s hodnocením vedoucího a posudkem oponenta práce. Student následně odpověděl na otázky oponenta a na další otázky přítomných. Komise se na základě posudku oponenta, hodnocení vedoucího, přednesené prezentace a odpovědí studenta na položené otázky rozhodla práci hodnotit stupněm B.

Otázky u obhajoby

Plánujete navržený systém dále rozšiřovat a reálně využít v praxi?
Považujete 100 událostí měření teploty za sekundu jako "big data"?

Komise

Hruška Tomáš, prof. Ing., CSc. (UIFS FIT VUT), předseda
Janoušek Vladimír, doc. Ing., Ph.D. (UITS FIT VUT), člen
Kolář Dušan, doc. Dr. Ing. (UIFS FIT VUT), člen
Malinka Kamil, Mgr., Ph.D. (UITS FIT VUT), člen
Rybička Jiří, doc. Ing. Dr. (Mendelu), člen
Rychlý Marek, RNDr., Ph.D. (UIFS FIT VUT), člen

Citace

BENKŐ, Krisztián. Zpracování velkých dat z rozsáhlých IoT sítí. Brno, 2019. Diplomová práce. Vysoké učení technické v Brně, Fakulta informačních technologií. 2019-06-20. Vedoucí práce Krčma Martin. Dostupné z: https://www.fit.vut.cz/study/thesis/22037/

BibTeX

@mastersthesis{FITMT22037,
    author = "Kriszti\'{a}n Benk\H{o}",
    type = "Diplomov\'{a} pr\'{a}ce",
    title = "Zpracov\'{a}n\'{i} velk\'{y}ch dat z rozs\'{a}hl\'{y}ch IoT s\'{i}t\'{i}",
    school = "Vysok\'{e} u\v{c}en\'{i} technick\'{e} v Brn\v{e}, Fakulta informa\v{c}n\'{i}ch technologi\'{i}",
    year = 2019,
    location = "Brno, CZ",
    language = "czech",
    url = "https://www.fit.vut.cz/study/thesis/22037/"
}