Diplomová práce

Machine Learning for Text Anomaly Detection

Bc. Alina Tsykynovska
Anotace

Tato práce se zaměřuje na výkon algoritmů strojového učení pro detekci anomálií ve dvou různých typech datových sad: numerické (síťové logy) a textové (e-maily). Pro e-mailovou datovou sadu jsou použité tři textové reprezentace: count vectorizer, TF-IDF a word embeddings. Srovnání zahrnuje výsledky napříč těmito reprezentacemi a výsledky napříč datovými sadami.

Abstract

This thesis focuses on the performance of machine learning algorithms for detecting anomalies across two different types of datasets: numerical (network logs) and textual (emails). Three text representations are assessed for the email dataset: count vectorizer, TF-IDF and word embeddings. The comparison includes the results across these representations and results across datasets.

Zadání práce
Anomaly detection is a concept widely applied to numerous domains, such as cyber intrusion, financial fraud, and many others. Within this topic, the student will focus on development of algorithms of anomaly detection using machine learning. The proposed principles will be applied mainly on text data (normal text, network syslogs, etc.) to automatically identify anomalies in large datasets. Some of the fields, where the developed anomaly detection algorithms will be applied on, include e-mails, network performance syslogs, network security syslogs and patient symptoms data. Student will primarily consider supervised and unsupervised machine learning concepts, as well as deep learning techniques. The developed algorithms will be verified through the numerical simulations as well as implementation in experimental environment. Preferred programming language to work with is PYTHON.

More specifically, the master thesis will deal with applying numerous machine learning models on many types of datasets. The objective is to find anomalies in data based on past dataset. The student is expected to analyze and compare the results and find the optimum models.

- Applying multiple machine learning models on various time series dataset to predict the future.
- Analyze the results and find the optimum models.
- Evaluate the proposed model and compare with other in the market.
Práce zkontrolována:
22. 5. 2024 22:56, doc. Ing. RNDr. Barbora Bühnová, Ph.D.
Jazyk práce
angličtina angličtina
Termín obhajoby
20. 6. 2024
Práce byla úspěšně obhájena

Vedoucí

doc. Ing. RNDr. Barbora Bühnová, Ph.D.
KPSK FI MU

Oponent

doc. Ing. Radim Burget, Ph.D.
FEKT VUT

Konzultant

Ing. Nabhan Khatib, Ph.D.
AT&T

  • Přidání souboru

    Soubor nebo složku lze nahrát pomocí tlačítka Přidat.
  • Další operace se soubory

    Podrobnosti lze zjistit označením příslušného řádku.
  • Pohled pro experty

    Pro častou práci je možné zvolit režim Více možností.
  • Vyhledávání souborů

    Vyhledávaný výraz můžete zadat přímo do adresního řádku.
  • Rychlý přístup k souborům

    Pomocí funkce Nedávné je možné se rychle vrátit k právě prohlíženým souborům. Oblíbené soubory je také možné označit Hvězdičkou.