Při vytváření prediktivních modelů pro finanční signály většina z nás standardně používá metriky jako RMSE nebo MAE. Ty jsou užitečné, ale mohou opomíjet základní otázku, která řídí mnoho strategií: dal model správný směr trhu? Zde přichází na řadu směrová přesnost (DA). Definice: Převodník DA měří procentuální hodnotu, ve které model správně předpoví, zda se hodnota posune nahoru nebo dolů vzhledem k poslednímu pozorování. Formálně: DA = (1/N) * Σ_t znaménko(A_t – A_{t-1}) * znaménko(I_t – A_{t-1}) Zde A = skutečná hodnota, I = odvození, N = počet predikcí a dolní indexy označují časové kroky. Proč je to důležité: • RMSE ≠ výkonnost obchodování. Model může minimalizovat chyby, ale neustále opomíjí znamení cenových změn, což vede ke špatným výsledkům. • Směr řídí rozhodnutí. U strategií výběru stran (long vs. short, risk-on vs. risk-off) závisí ziskovost silně na správnosti callu, méně na velikosti chyby. • Ekonomická hodnota je spojena s DA. I malá zlepšení nad 50 % DA mohou vytvořit smysluplnou výhodu, když se spojí do mnoha obchodů. Výklad v praxi: • 50 % = statisticky významná výhoda na hlučných trzích. • 55–60 % = vysoce výkonný, v reálných finančních datech vzácný. • 60%+ = připravte se na předčasný odchod do důchodu. Pro tvůrce modelů Forge je zlepšení směrové přesnosti (DA) důležité zejména v tématech vracejících protokolů, kde ztrátová funkce klade větší váhu na předpovídání správného znaménka, které vrací. I když síť nehodnotí účastníky pouze na základě DA, některé ztrátové funkce jsou navrženy tak, aby oceňovaly směrovou správnost více než obvykle. V těchto případech budou modely, které častěji "trefí správné znaménko", fungovat lépe v systému bodování a na oplátku více přispívat ke kolektivní inteligenci sítě. To posiluje downstream strategie v obchodování, zajištění volatility a proaktivní provádění DeFi, aniž by se příliš zjednodušovalo vyhodnocování pouze na DA. Při vylepšování modelů v aplikaci Forge přemýšlejte nad rámec RMSE. Směrová přesnost je často metrikou, která určuje, zda se váš příspěvek stane součástí vítězné strategie v řetězci. Začínáme s kovárnou:
10,32K