ŠČAVNICKÁ, Šárka, Michal ŠTEFÁNIK a Petr SOJKA. Document Visual Question Answering with CIVQA: Czech Invoice Visual Question Answering Dataset. In Recent Advances in Slavonic Natural Language Processing (RASLAN 2023). Recent Advances in Slavonic. Brno: Tribun EU, 2023, s. 23-34. ISBN 978-80-263-1793-7.
Další formáty:   BibTeX LaTeX RIS
Základní údaje
Originální název Document Visual Question Answering with CIVQA: Czech Invoice Visual Question Answering Dataset
Autoři ŠČAVNICKÁ, Šárka (703 Slovensko, garant, domácí), Michal ŠTEFÁNIK (703 Slovensko, domácí) a Petr SOJKA (203 Česká republika, domácí).
Vydání Recent Advances in Slavonic. Brno, Recent Advances in Slavonic Natural Language Processing (RASLAN 2023), od s. 23-34, 12 s. 2023.
Nakladatel Tribun EU
Další údaje
Originální jazyk angličtina
Typ výsledku Stať ve sborníku
Obor 10201 Computer sciences, information science, bioinformatics
Stát vydavatele Česká republika
Utajení není předmětem státního či obchodního tajemství
Forma vydání tištěná verze "print"
WWW fulltext PDF
Kód RIV RIV/00216224:14330/23:00132396
Organizační jednotka Fakulta informatiky
ISBN 978-80-263-1793-7
ISSN 2336-4289
Klíčová slova anglicky Question Answering; Visual Question Answering; Document Visual Question Answering; CIVQA; Czech Invoice Visual Question Answering
Příznaky Mezinárodní význam
Změnil Změnil: RNDr. Pavel Šmerk, Ph.D., učo 3880. Změněno: 7. 4. 2024 23:37.
Anotace
Applications of document processing become increasingly popular across multiple industries, resulting in a growing amount of research on the applications of artificial intelligence in document processing (Document AI). This paper focuses on a subtask of Document AI, Document Visual Question Answering (DVQA), recently getting well-deserved attention thanks to its universality. However, the limited availability of data sources for languages outside English restrains the applicability of DVQA in non-English languages.

For this reason, we created the CIVQA (Czech Inovice Visual Question Answering) dataset covering 15 entities of financial documents, consisting of more than 6,000 invoices in the Czech language.

We used the CIVQA dataset to create the first-of-its-kind DVQA models specifically tailored for applications to Czech documents. Striving to create DVQA models able to generalize, we specifically evaluate our models on the entities not covered in the training mix and find that multilingual LayoutLM models are able to respond to questions about previously unseen entities substantially more accurately than other models.

The CIVQA dataset and experiment observations offer new opportunities for Document AI in the Czech Republic, with potential applications in research and commercial fields.

Návaznosti
CZ.01.1.02/0.0/0.0/21_374/0026711, interní kód MUNázev: Inteligentní back office
Investor: Ministerstvo průmyslu a obchodu ČR, Inteligentní back office
EG21_374/0026711, projekt VaVNázev: Inteligentní back office
MUNI/A/1339/2022, interní kód MUNázev: Rozvoj technik pro zpracování dat pro podporu vyhledávání, analýz a vizualizací rozsáhlých datových souborů s využitím umělé inteligence
Investor: Masarykova univerzita, Rozvoj technik pro zpracování dat pro podporu vyhledávání, analýz a vizualizací rozsáhlých datových souborů s využitím umělé inteligence
VytisknoutZobrazeno: 14. 10. 2024 13:22