Evalvacija orodij za slovnično označevanje slovenščine

Osnutek (2. 11. 2026): kot tretje orodje je dodana Stanza 1.14. Še neobjavljeno; objavljena različica je dostopna na: orodja.cjvt.si/oznacevalnik/eval.

Splošna natančnost —

Rezultati po skladenjskih relacijah

Rezultati po besednih vrstah

Najpogostejše napake skladenjskega razčlenjevanja

Ta tabela prikazuje najpogostejše napake skladenjskih relacij izbranega orodja v primerjavi z ročno označeno testno množico. Kliknite vrstico za prikaz primerov; za premikanje uporabite ↑/↓, za zaprtje pogleda s primeri pa Esc.

Najpogostejše napake označevanja besednih vrst

Ta tabela prikazuje najpogostejše napake označevanja UPOS izbranega orodja v primerjavi z ročno označeno testno množico. Kliknite vrstico za prikaz primerov.

Najpogostejše napake oblikoskladenjskega označevanja (MULTEXT-East)

Ta tabela prikazuje najpogostejše napake oblikoskladenjskega označevanja (MULTEXT-East / JOS) izbranega orodja v primerjavi z ročno označeno testno množico. Za prikaz razčlenjene oznake MSD se z miško pomaknite na vrstico ali jo izberite; kliknite vrstico za prikaz primerov.

Najpogostejše napake lematizacije

Ta tabela prikazuje najpogostejše napake lematizacije izbranega orodja v primerjavi z ročno označeno testno množico. Kliknite vrstico za prikaz primerov.

Zahvala

To delo je nastalo v okviru raziskovalnih projektov SPOT, LLM4DH in MAPCASE (ARIS št. Z6-4617, GC-002 in J6-70213) z infrastrukturno podporo Centra za jezikovne vire in tehnologije Univerze v Ljubljani (CJVT UL) in Slovenske raziskovalne infrastrukture za jezikovne vire in tehnologije (CLARIN.SI). Interaktivno spletno stran je izdelala Nives Hüll pod mentorstvom Kaje Dobrovoljc Zor.

Priporočeno citiranje

Če uporabljate to evalvacijsko tabelo, prosimo, citirajte:

Dobrovoljc, Kaja. 2025. “Treebanking Spoken Slovenian: New Data, Models, and Lessons Learned.” Contributions to Contemporary History 65(3). https://doi.org/10.51663/pnz.65.3.01

BibTeX

@article{dobrovoljc2025treebanking,
  author  = {Dobrovoljc, Kaja},
  title   = {Treebanking Spoken Slovenian: New Data, Models, and Lessons Learned},
  journal = {Contributions to Contemporary History},
  year    = {2025},
  volume  = {65},
  number  = {3},
  doi     = {10.51663/pnz.65.3.01}
}