SOJKA, Ondřej a Petr SOJKA. Towards Perfection of Machine Learning of Competing Patterns: The Use Case of Czechoslovak Patterns Development. In Recent Advances in Slavonic Natural Language Processing (RASLAN 2023). Recent Advances in Slavonic. Brno: Tribun EU, 2023, s. 113-120. ISBN 978-80-263-1793-7.
Další formáty:   BibTeX LaTeX RIS
Základní údaje
Originální název Towards Perfection of Machine Learning of Competing Patterns: The Use Case of Czechoslovak Patterns Development
Autoři SOJKA, Ondřej (203 Česká republika, garant, domácí) a Petr SOJKA (203 Česká republika, domácí).
Vydání Recent Advances in Slavonic. Brno, Recent Advances in Slavonic Natural Language Processing (RASLAN 2023), od s. 113-120, 8 s. 2023.
Nakladatel Tribun EU
Další údaje
Originální jazyk angličtina
Typ výsledku Stať ve sborníku
Obor 10201 Computer sciences, information science, bioinformatics
Stát vydavatele Česká republika
Utajení není předmětem státního či obchodního tajemství
Forma vydání tištěná verze "print"
WWW fulltext PDF
Kód RIV RIV/00216224:14330/23:00132397
Organizační jednotka Fakulta informatiky
ISBN 978-80-263-1793-7
ISSN 2336-4289
Klíčová slova anglicky dictionary problem; effectiveness; hyphenation patterns; patgen; syllabification; Czech; Slovak; Czechoslovak patterns; machine learning
Příznaky Mezinárodní význam
Změnil Změnil: RNDr. Pavel Šmerk, Ph.D., učo 3880. Změněno: 7. 4. 2024 23:37.
Anotace
Finding space- and time-effective even perfect solution to the dictionary problem is an important practical and research problem, which solving may lead to a breakthrough in computation. Competing pattern technology from TeX is a special case, where for a given dictionary a word segmentation is stored in the competing patterns yet with very good generalization quality. Recently, the unreasonable effectiveness of pattern generation has been shown---it is possible to use hyphenation patterns to solve the dictionary problem jointly even for several languages without compromise.

In this article, we study the effectiveness of patgen for the supervised machine learning of the generation of the Czechoslovak hyphenation patterns. We show the machine learning techniques to develop competing patterns that are close to being perfect. We evaluate the new approach by improvements and space savings we gained during the development and finetuning of Czechoslovak hyphenation patterns.

Návaznosti
LM2023062, projekt VaVNázev: Digitální výzkumná infrastruktura pro jazykové technologie, umění a humanitní vědy
Investor: Ministerstvo školství, mládeže a tělovýchovy ČR, LINDAT/CLARIAH-CZ - Digitální výzkumná infrastruktura pro jazykové technologie, umění a humanitní vědy
VytisknoutZobrazeno: 24. 5. 2024 03:48