Validierung & Robustheit
Können von Glück unterscheiden — Overfitting, PBO, Monte Carlo, Stress und Tail-Risiko.
Overfitting & PBO
Eine Strategie ist überangepasst, wenn sie so eng an Vergangenheitsdaten justiert ist, dass sie Rauschen statt Signal abbildet — im Backtest brillant, live wertlos. PBO (Probability of Backtest Overfitting) schätzt die Wahrscheinlichkeit, dass deine beste Konfiguration überangepasst ist; niedriger ist besser. Damit relativierst du einen zu sauberen Backtest. Walk-forward-Tests sind die erste Verteidigungslinie — siehe die Walk-forward-Seite.
Monte Carlo
Monte Carlo zieht und mischt deine Trade-Ergebnisse tausendfach neu und erzeugt so eine Ergebnisverteilung statt einer einzelnen Zahl. Es zeigt die Bandbreite an Equity-Kurven und Drawdowns, die realistisch möglich waren, sodass du eine Strategie an der Streuung der Ergebnisse misst, nicht am einen glücklichen (oder unglücklichen) tatsächlichen Pfad.
Stresstests
Stresstests spielen die Strategie durch historisch harte Regime — Crashs, Seitwärtschop, scharfe Rallys — und legen adversariale Schocks wie zusätzlichen Slippage und Order-Ablehnungen auf. Die Frage ist nicht, wie sie an einem Durchschnittstag abschneidet, sondern ob sie die schlimmsten übersteht.
VaR & CVaR
Value at Risk (VaR) ist eine Verlustschwelle, die du bei gegebener Konfidenz nicht überschreitest — z. B. 95 % der Perioden verlieren weniger als X. Conditional VaR (CVaR) ist der durchschnittliche Verlust in den schlechten Perioden jenseits dieser Schwelle — die Größe des Tails. Zusammen beschreiben sie nicht nur, wie oft du verlierst, sondern wie schlimm die seltenen Verluste werden.