Ako otestovať Jev na slovenčine

Čo zatiaľ vieme

Výrobca uvádza angličtinu ako hlavný tréningový jazyk a upozorňuje, že ostatné jazyky nedosahujú rovnaké výsledky. S01 Slovenskú presnosť nemožno odvodiť z anglického bankového testu. Najbližší verejný údaj z nášho jazykového priestoru je český test interného prelinkovania článkov na vibecoding.cz; ide však o iný jazyk a jednu úlohu. S27

Náš navrhovaný súbor

Ako štart odporúčame 300 až 500 ručne skontrolovaných príkladov, nie ako univerzálny dôkaz kvality. Zastúpte bežné dopyty, skrátené správy, text bez diakritiky, preklepy, negácie a neúplné podklady. Zriedkavé rizikové kategórie hodnotíme osobitne.

Pôvodné zákaznícke správy vyžadujú vhodný právny základ a minimalizáciu dát. Pre prvý technický test možno pripraviť syntetické príklady; tie však treba označiť a nesmú nahradiť reálnu reprezentatívnu vzorku pri rozhodnutí o produkcii.

Oddelené skupiny dát

Jednu časť použite na formuláciu kritérií, druhú na prahy a tretiu nechajte nedotknutú až do konca. Verzie pravidiel a modelov zapisujte. Po zistení chyby v testovacom súbore ho bez priznania nepoužite znova ako „nový nezávislý test“.

Porovnanie variantov

Navrhujeme slovenské zadanie, anglické inštrukcie nad slovenským obsahom a podľa potreby prekladový postup. Pri preklade započítajte cenu, čas a možné nové chyby. Všetky varianty majú dostať rovnaké prípady.

Výsledok nech ukazuje presnosť po kategóriách, počet kritických omylov, podiel automatizácie a cenu správneho prípadu. Keď Jev nevie, úspechom môže byť správne odovzdanie človeku, nie vynútená kategória.