Bakalářská práce

Evaluation and Interpretation of Word Embeddings

Jakub Kuchár, učo 484954
Anotace

V práci sa zaoberám problémom neadekvátnej evluácie verejných slovných modelov. Najprv stručne predstavím pojem „slovné embeddingy“ a prečo ich používam. Predstavím existujúce modely pre tieto embeddingy a taktiež niektoré z existujúcich verejných embeddingov. V hlavnej časti tejto práce evaluujem tieto verejné embeddingy na štyroch evaluačných úlohách a na základe výsledkov odporučím, ktoré embeddingy sú vhodné na ktoré úlohy.

Abstract

In my thesis, I deal with the problem of the inadequate evaluation of public word embedding models. First, I briefly introduce word embeddings and why I use them. Then, I introduce the existing models for word embeddings and also some of the existing public word embeddings. In the main part of my thesis, I evaluate public word embeddings on four evaluation tasks and according to results, I suggest which models are best suited for different evaluation tasks.

Klíčová slova
information retrieval MIR neural networks NLP word embeddings
Zadání práce

The student will study word embedding models [1–3], public pre-trained word embeddings, and existing tasks for their quantitative evaluation [4–7]. The student will implement a selected set of evaluation tasks and use their implementation to evaluate and compare selected pre-trained word embeddings. Based on the results of the evaluation, the student will suggest optimal pre-trained word embeddings for the individual tasks.

Student nastuduje modely pro vektorové reprezentace slov [1–3], veřejně dostupné předtrénované reprezentace slov a existující úlohy pro jejich kvantitativní evaluaci [4–7]. Student implementuje baterii vybraných úloh pro evaluaci vektorových reprezentací slov a s využitím této baterie evaluuje a vzájemně porovná vybrané předtrénované reprezentace. Na základě své evaluace student doporučí vhodné předtrénované reprezentace pro jednotlivé úlohy.

Administrativní informace
Práce zkontrolována:
25. 5. 2021 15:43, RNDr. Vít Starý Novotný, Ph.D., učo 409729
Plný text práce
771,6 KB / soubor PDF
Přílohy (1)
Jazyk práce
angličtina angličtina
Termín obhajoby
28. 6. 2021
Práce byla úspěšně obhájena

Vedoucí

RNDr. Vít Starý Novotný, Ph.D., učo 409729
KSUZD FI MU

Oponent

RNDr. Vít Suchomel, Ph.D., učo 139723
CZPJ KSUZD FI MU
Citovat tuto práci
Masarykova univerzita Fakulta informatiky
Studijní program
Aplikovaná informatika
Obor

Práce na příbuzné téma

Seznam prací, které mají shodná klíčová slova.

Podobné práce

  • Přidání souboru

    Soubor nebo složku lze nahrát pomocí tlačítka Přidat.

  • Další operace se soubory

    Podrobnosti lze zjistit označením příslušného řádku.

  • Pohled pro experty

    Pro častou práci je možné zvolit režim Více možností.

  • Vyhledávání souborů

    Vyhledávaný výraz můžete zadat přímo do adresního řádku.

  • Rychlý přístup k souborům

    Pomocí funkce Nedávné je možné se rychle vrátit k právě prohlíženým souborům. Oblíbené soubory je také možné označit Hvězdičkou.