Diplomová práce

Big Data Analysis Platform for Smart Grids Datasets

Bc. Peter Lipčák
Anotace

Modernizácia výroby a dodávky elektrickej energie je vysoko ovplyvnená analýzou v oblasti Big Data. Dáta zozbierané z inteligentných elektrických sietí (Smart Grids) majú mnoho Big Data charakteristík a vyžadujú špecifické dátové riešenia. Hlavným cieľom práce je navrhnúť a implementovať Big Data platformu vhodnú pre spracovávanie veľkého množstva dát získaných z inteligentných elektrických sietí. …více

Abstract

Modernization of electric power generation and delivery is highly influenced by big data analysis. Smart grids data possess many characteristics of big data and analysis in this context requires a big data solution. The primary focus of the thesis is to design and implement a big data processing platform suitable for smart grids data. In this thesis, we reviewed big data architectures and technologies …více

Klíčová slova
Big Data Analysis Platform Smart Grids Batch Processing Stream Processing Real-Time Analytics
Zadání práce
Data analysis in the context of the Smart Grids domain is often conducted on publicly available datasets. The aim of this thesis is to build a prototype platform that can support Big Data Analysis on public Smart Grids datasets. The tasks foreseen:
  • review existing Big Data architectures (e.g., lambda vs kappa architectures) / frameworks (e.g., Apache Spark) that can be applied in this context;
  • review the literature about Big Data analytics studies in the context of Smart Grids;
  • build a platform that can allow users to select the public datasets to use, the method of "densification" (if any) for the datasets, and to run custom analysis scripts (e.g. Java, Python, R, or Matlab) to analyze massive streams of data;
  • Within the platform, run an experimental comparison of a set of identified frameworks/architectures. Anomaly detection of power consumption data can be used as the domain of the experiment;
Administrativní informace
Práce zkontrolována:
21. 5. 2019 09:49, doc. Bruno Rossi, PhD, učo 232464
Plný text práce
2,6 MB / soubor PDF
Přílohy (3)
Jazyk práce
angličtina angličtina
Termín obhajoby
18. 6. 2019
Práce byla úspěšně obhájena

Vedoucí

doc. Bruno Rossi, PhD, učo 232464
CERIT FI MU

Oponent

doc. Mouzhi Ge, Ph.D.
KPSK FI MU
Citovat tuto práci
Masarykova univerzita Fakulta informatiky
Studijní program
Aplikovaná informatika
Obor

Práce na příbuzné téma

Seznam prací, které mají shodná klíčová slova.

Podobné práce

  • Přidání souboru

    Soubor nebo složku lze nahrát pomocí tlačítka Přidat.

  • Další operace se soubory

    Podrobnosti lze zjistit označením příslušného řádku.

  • Pohled pro experty

    Pro častou práci je možné zvolit režim Více možností.

  • Vyhledávání souborů

    Vyhledávaný výraz můžete zadat přímo do adresního řádku.

  • Rychlý přístup k souborům

    Pomocí funkce Nedávné je možné se rychle vrátit k právě prohlíženým souborům. Oblíbené soubory je také možné označit Hvězdičkou.