Jev a časové rady: jasné tvary rozlíši, pri číslach je blízko náhody

Rozhodovací model Jev je stavaný na otázky nad textom. Nový preprint skúša, čo urobí, keď mu namiesto textu pošlete rad čísel: meranie zo senzora, ceny akcií alebo záznam udalostí. Autori z Hong Kong University of Science and Technology (Guangzhou) prerobili úlohy z oblasti časových radov na otázky s pevnými možnosťami a otestovali na nich jev-1.13.0. S69 Výsledok je nerovnomerný: pri výrazných tvaroch kriviek a pri type udalostí model niečo rozlišuje, pri väčšine číselných radov však odpovedá približne na úrovni náhody. S69 Pre e-shop, ktorý uvažuje, že by Jevom predpovedal predaj alebo vývoj ceny, je to užitočné varovanie.

Ako autori úlohy postavili

Preprint napísali Jianye Wang, Kexin Zhang, Jiayin Xiong a Hao Xue. S69 Pozorovania zoradili chronologicky do stavu (state), podľa potreby s názvami kanálov a časovými značkami, a ku každej úlohe pridali pevnú otázku. Čísla model číta ako bežné tokeny. S69 Dvojhodnotové úlohy kládli ako Noul, úlohy s viacerými triedami ako Choice. S69 Ako presne vyzeral vstup, napríklad zaokrúhlenie či dĺžka okna, text neuvádza. S69

Testovali šesť skupín úloh: 41 dvojtriednych a 86 viactriednych jednorozmerných súborov z archívu UCR, 17 viacrozmerných súborov UEA, päť súborov postupností udalostí EasyTPP, osem nastavení ETT a denné záverečné ceny troch akcií (AAPL, BA, CAT). S69 Pri ETT sa otázka týkala toho, či teplota oleja o 24 hodín stúpne. Pri akciách išlo o to, či cena o pevne zvolený počet obchodných krokov stúpne. S69

Výsledky autori uvádzajú v dvoch metrikách, presnosti (ACC) a AUC. S69 AUC vyjadruje, či model dáva správnym odpovediam vyššie pravdepodobnosti než nesprávnym. Hodnota 0,5 zodpovedá náhodnému tipovaniu.

Kde Jev obstál a kde nie

Najlepšie dopadli súbory s jasnými tvarmi. Pri SyntheticControl mal Jev presnosť 0,81 a AUC 0,9978, pri SmoothSubspace presnosť 0,90 a AUC 0,9815. S69 Pri postupnostiach udalostí EasyTPP bolo priemerné AUC 0,7028 a v súbore Taobao dosiahol presnosť 0,6343 a AUC 0,8241. S69

Opačný koniec tvoria akcie a priemyselné merania. Pri troch akciách bolo priemerné AUC 0,5040 a presnosť 0,5034, teda prakticky náhoda. S69 Pri ETT bolo priemerné AUC 0,5900 a presnosť sa podľa autorov vo väčšine nastavení držala okolo 0,5. S69 Väčšina číselných klasifikačných úloh sa tiež pohybovala pri náhode: medián AUC bol 0,5047 pri viactriednych súboroch UCR a 0,4986 pri UEA. S69 Slabo dopadli aj fyziologické signály, napríklad EKG. Autori ako možné vysvetlenie uvádzajú málo doménových znalostí a nedostatočné zachytenie znakov signálu, istú príčinu však neurčujú. S69

Dobré poradie ešte neznamená dobré rozhodnutie

Zaujímavý je rozdiel medzi AUC a presnosťou. Pri súbore GunPoint malo AUC hodnotu 0,7215, presnosť však len 0,52. Pri BasicMotions bolo AUC 0,7671 a presnosť 0,30. S69 Pravdepodobnosti teda niekedy radia správne odpovede vyššie, no konečný výber z nich nevychádza dobre. Autori v tom vidia dôvod preskúmať prahy pri dvojhodnotových otázkach a porovnateľnosť skóre medzi triedami. Priamo to v preprinte nemerali. S69

Čo z toho plynie pre slovenský e-shop

Lákavá myšlienka znie: pošlem Jevu denné predaje produktu za posledné týždne a opýtam sa, či budúci týždeň stúpnu. Úlohy s akciami a s teplotou oleja mali rovnakú podobu, číselný rad a otázku, či hodnota stúpne, a výsledky v nich boli blízko náhody. S69 Vlastný návrh JEV.sk: trend, sezónnosť a medziročné porovnanie počítajte v kóde alebo bežnou štatistickou metódou. Jevu nechajte otázky nad textom, napríklad či správa zákazníka hlási oneskorenú zásielku. Ak chcete číselný signál predsa použiť, dajte do stavu už vypočítaný opis („predaj za 14 dní klesol o 30 %“) namiesto surových čísel. Aj to je však len návrh, preprint takýto postup neskúšal.

Rozdiel medzi AUC a presnosťou má ešte jeden praktický dôsledok. Kto používa pravdepodobnosti Jevu na zoradenie, mal by si prah nastaviť a overiť na vlastných dátach, nie sa spoliehať len na najpravdepodobnejšiu možnosť. Ako pracovať s istotou a prahmi, opisuje sprievodca confidence a kalibrácia. Rozdiel medzi typmi otázok vysvetľuje stránka Choice, Score a Noul.

Limity preprintu

Ide o preprint a testovaný bol jediný model. Autori Jev neporovnávali so žiadnym iným modelom ani s bežnými metódami pre časové rady, takže nevieme, ako by si viedla jednoduchá štatistika. S69 Cenu ani rýchlosť odpovedí nemerali. S69 Testovaná verzia bola jev-1.13.0. Od 14. 10. 2026 je dostupný jev-1.14.0 a alias jev-latest dnes smeruje naň. S01 Či novšia verzia zvláda časové rady lepšie, preprint neskúma a JEV.sk to nemeralo.