[ Calibration & Quality ]

Calibration & Quality Metrics

Cât de bine se aliniază probabilitățile noastre cu realitatea? Iată trei metrici publice — Brier, CRPS și DSR — recalculate continuu din semnalele noastre rezolvate. Fără editare, fără cherry-picking.

← Track RecordVezi metodologia →

Brier Score

Acceptabil

Calibrare forecast direcție (bullish/bearish/neutral). Mai mic e mai bun.

0.286

61 forecast-uri rezolvate · țintă < 0.20

BS = (1 − p)² când corect

CRPS

Slab

Calitate forecast cuantilic (P10 / P50 / P90). Mai mic e mai bun.

2.215

37 forecast-uri quantile · țintă < 0.15

∫ (F(x) − 1{x ≥ y})² dx

Deflated Sharpe

Atenție

Probabilitatea ca edge-ul să supraviețuiască multiple-testing bias. Mai mare e mai bun.

0.000

111 semnale închise · Sharpe = 0.03 · N_trials = 10

DSR = Φ((SR − SR₀) · √(N − 1) / σ̂)

Ultimă actualizare: 02 Jun 2026, 21:48 · Fereastră: 90 zile

Cum citești aceste metrici

  • Brier măsoară cât de bine se potrivesc probabilitățile cu rezultatele binare ale forecast-urilor (bullish/bearish/neutral). Variantă trinomială corectă: predicție corectă la confidence 70% → ~0.09; predicție opusă → ~0.49. Lower = better. Țintă: < 0.20.
  • CRPS (Continuous Ranked Probability Score) evaluează calitatea forecast-urilor cuantilice — nu doar direcția, ci întreaga distribuție. Lower = better. Țintă: < 0.15.
  • DSR (Deflated Sharpe Ratio) este probabilitatea ca edge-ul nostru să supraviețuiască corecției de multiple-testing bias (Bailey & Lopez de Prado 2014). Higher = better. Țintă: ≥ 0.95.

Vezi semnalele live de la AI Council.

Get Started Free →