Zuverlässiges Backtesting: 5 Verzerrungen, die Ihre Ergebnisse verfälschen
Repainting, Survivorship-Bias, optimistische Ausführungsreihenfolge, vergessener Spread, zu kurze Stichprobe: fünf Verzerrungen reichen aus, um eine mittelmäßige Methode in eine verführerische Kurve zu verwandeln. So erkennen Sie sie.
Das Wichtigste
- Ein zuverlässiger Backtest zeigt sich zuerst an seiner Simulationsmethode, nicht an der Steigung der Eigenkapitalkurve.
- Repainting ist die zerstörerischste Verzerrung: Ein Signal, das während der Kerze erscheint und beim Kerzenschluss wieder verschwindet, war live nie handelbar.
- Werden Stopp und Ziel innerhalb derselben Kerze erreicht, liefert nur die pessimistische Ausführungsreihenfolge – zuerst der Stopp – ein ehrliches Ergebnis.
- Vergessener Spread und Kommission können ausreichen, um eine Methode mit geringer Erwartungswert von positiv auf negativ kippen zu lassen.
- Eine Stichprobe von weniger als hundert Trades, die nur eine einzige Marktphase abdeckt, beweist nichts über die Robustheit einer Methode.
Ein zuverlässiger Backtest simuliert die realen Ausführungsbedingungen: Signale werden erst beim Kerzenschluss bestätigt, die Ausführungsreihenfolge innerhalb der Kerze ist pessimistisch, Transaktionskosten sind eingerechnet, und die Stichprobe ist lang und vielfältig. Fünf Verzerrungen genügen, um jede beliebige Methode zu schönen: Repainting, Survivorship-Bias, optimistische Ausführungsreihenfolge, vergessener Spread und zu kurze Stichprobe. Wer sie kennt, kann einen Bericht in zehn Minuten richtig lesen.
Warum eine schöne Eigenkapitalkurve nichts beweist
Die Kapitalkurve ist das am meisten beachtete und am wenigsten aussagekräftige Element eines Backtests. Sie ist das Ergebnis einer Kette von Annahmen. Ist auch nur eine dieser Annahmen falsch, bleibt die Kurve schön – und wird zur Lüge.
Ein konkretes Beispiel: Eine Methode, die kauft, sobald ein Indikator während der Kerze auf Grün wechselt, ohne den Kerzenschluss abzuwarten, zeigt eine deutlich höhere Trefferquote als in der Realität. Nicht weil sie gut ist, sondern weil der Verlauf nur die Fälle speichert, in denen das Grün bestehen blieb. Live hätten Sie sämtliche Fehlsignale innerhalb der Kerze mitgenommen.
Der richtige Reflex ist also umgekehrt: Lesen Sie zuerst, wie der Test durchgeführt wurde, und erst danach das Ergebnis.
Verzerrung 1: Repainting, die teuerste Lüge
Repainting bezeichnet einen Indikator, der seine vergangenen Signale nachträglich ändert. Es gibt zwei Formen.
- Intrabar-Repainting: Das Signal erscheint, verschwindet, kehrt zurück, solange die Kerze nicht geschlossen ist. Der Verlauf zeigt nur den Endzustand.
- Rückwirkendes Repainting: Der Indikator nutzt zukünftige Daten, um einen vergangenen Punkt zu platzieren – typisch bei Detektoren „perfekter“ Hoch- und Tiefpunkte.
Der Test ist einfach. Öffnen Sie Ihren Chart mitten in einer Kerze, halten Sie die Position der Signale fest und kehren Sie nach dem Kerzenschluss zurück. Hat sich etwas verschoben, sind alle aus diesem Verlauf gezogenen Zahlen wertlos.
Genau aus diesem Grund bestätigt die Engine von PIPSTER PRO ein Supertrend-Signal auf Heikin-Ashi-Kerzen erst beim Kerzenschluss: Ein angezeigtes Signal ist ein Signal, das zu diesem Zeitpunkt unter denselben Bedingungen bereits existierte.
Verzerrung 2: Survivorship-Bias – was der Verlauf nicht mehr zeigt
Der Survivorship-Bias ist bei Aktien berüchtigt: Wer eine Strategie an den heutigen Bestandteilen eines Index testet, schließt automatisch alle aus dem Index geflogenen Unternehmen aus. Der Forex-Markt entgeht diesem Problem nur teilweise.
Für Privattrader nimmt er drei subtilere Formen an:
- Survivorship bei Instrumenten: Sie testen an Paaren und Kryptowährungen, die seit drei Jahren gut trenden, und ignorieren die, die stagnierten.
- Survivorship bei Parametern: Sie behalten nur die eine Parameterkombination, die von fünfzig getesteten eine saubere Kurve liefert. Das ist verdecktes Überanpassen (Overfitting).
- Survivorship bei Zeiträumen: Sie beginnen den Test „ab 2023“, weil 2021 weniger schmeichelhaft war.
Gegenmittel: Legen Sie Zeitraum und Instrumentenliste vor dem Testlauf fest und veröffentlichen Sie auch die Instrumente, die schlecht funktioniert haben. Ein Bericht, der nur Gewinner zeigt, ist ein gefilterter Bericht.
Verzerrung 3: die optimistische Ausführungsreihenfolge innerhalb der Kerze
Dies ist die technischste und häufigste Verzerrung. Berührt der Kurs auf einer H1-Kerze sowohl Ihren Stopp als auch Ihr erstes Ziel (TP1) – welches Ereignis trat zuerst ein? Die OHLC-Daten geben darüber keine Auskunft.
Zwei mögliche Annahmen, zwei völlig unterschiedliche Welten:
| Annahme | Behandlung der Mischkerze | Auswirkung auf die Statistik |
|---|---|---|
| Optimistische Reihenfolge | Das Ziel gilt als vor dem Stopp erreicht | Trefferquote und Erwartungswert künstlich aufgebläht |
| Pessimistische Reihenfolge | Der Stopp wird vor dem Ziel geprüft | Untergrenzen-Ergebnis, vorsichtig, praxistauglich |
| Feinere Daten | Neuberechnung auf M1- oder Tick-Basis | Am genauesten, aber aufwendig und selten verfügbar |
Bei engen Stopps und Zielen bei 1R kann der Unterschied zwischen den ersten beiden Annahmen dramatisch sein. Ein seriöser Backtest nennt seine Wahl ausdrücklich. Das integrierte Backtesting von PIPSTER spielt die Kursreihe Kerze für Kerze mit pessimistischer Ausführungsreihenfolge nach: Was Sie sehen, ist das ungünstige Szenario, nicht der Best Case.
Verzerrung 4: vergessener Spread, Kommission und Slippage
Ein Test „zu reinen Kursen“ setzt voraus, dass Sie zum gleichen Preis kaufen und verkaufen, ohne Gebühren. Kein Trader lebt in dieser Welt. Ein vollständiges Beispiel mit Gold.
Hypothetisches Konto von 10.000 $, Risiko von 1 %, also 100 $.
- Long-Einstieg XAUUSD bei 3.380,00
- Struktureller Stopp bei 3.372,00, also 8,00 $ Risiko, somit 1R = 8,00 $ Bewegung
- Positionsgröße: 100 $ / (8,00 × 100 $ pro Lot und Dollar) = 0,12 Lot
- TP1 bei 1R: 3.388,00. TP2 bei 2R: 3.396,00. TP3 bei 3R: 3.404,00
Fügen wir nun einen Round-Trip-Spread von 0,30 $ und eine durchschnittliche Slippage von 0,20 $ beim Einstieg hinzu. Die realen Kosten betragen 0,50 $ bei einem Risiko von 8,00 $, also 6,25 % Ihres R. Bei 200 Trades entspricht das 12,5 R, die in Friktionskosten verpuffen. Eine Methode mit einem Brutto-Erwartungswert von 0,08 R pro Trade sinkt auf netto 0,017 R: mathematisch noch positiv, praktisch jedoch der Gnade jeder Spread-Ausweitung während einer Nachricht ausgeliefert.
Die praktische Schlussfolgerung lautet nicht „geben Sie auf“, sondern: Je enger Ihr Stopp, desto stärker wiegen die Kosten. Die Rechner für Positionsgröße und Pip-Wert helfen Ihnen, diese Friktion vor der Entscheidung in Ihre Währung umzurechnen.
Verzerrung 5: zu kurze oder zu homogene Stichprobe
Dreißig Trades in sechs Wochen eines klaren Aufwärtstrends testen nichts: Sie beschreiben einen Aufwärtstrend. Eine aussagekräftige Stichprobe muss lang und heterogen sein.
Drei Fragen an jeden Bericht:
- Wie viele Trades? Unter hundert ist das Konfidenzintervall so breit, dass der Durchschnitt kaum etwas bedeutet.
- Welche Marktphasen? Mindestens ein Aufwärtstrend, ein Abwärtstrend und eine längere Range-Phase sind nötig.
- Wie lang ist die längste Serie aufeinanderfolgender Verluste? Diese Zahl – nicht der Gesamtgewinn – entscheidet, ob Sie die Methode durchhalten.
Auf sehr niedrigen Zeiteinheiten liefert ein Monat Verlauf viele Trades, aber nur eine einzige Volatilitätssaison. Auf hohen Zeiteinheiten haben Sie Vielfalt, aber wenige Vorkommen. Diese Abwägung muss bewusst getroffen werden, nicht standardmäßig.
Die 7-Schritte-Prozedur für die ehrliche Lektüre eines Backtests
- Prüfen Sie auf Repainting. Vergleichen Sie den Indikator live mit dem Verlauf. Bewegen sich die Signale, stoppen Sie hier.
- Lesen Sie die Bestätigungsregel. Wird das Signal beim Kerzenschluss bestätigt oder schon während der Bildung?
- Suchen Sie die Intrabar-Reihenfolge. Wird der Stopp vor dem Ziel geprüft, oder umgekehrt? Steht es nicht im Bericht, gehen Sie von einer optimistischen Annahme aus.
- Rechnen Sie die Kosten hinzu. Durchschnittlicher Spread, Kommission, Slippage. Berechnen Sie den Erwartungswert in R nach Friktion neu.
- Zählen Sie die Stichprobe. Anzahl der Trades, abgedeckter Zeitraum, durchlaufene Marktphasen.
- Betrachten Sie die schlimmste Serie. Wie viele Verluste in Folge, welcher kumulierte Verlust in R? Multiplizieren Sie mit Ihrem Risiko in Währung: das ist der Wert, den Sie ertragen müssen.
- Spielen Sie den Test identisch auf einem anderen Instrument oder Zeitraum nach. Ohne einen einzigen Parameter zu ändern. Bricht die Struktur des Ergebnisses zusammen, war die Methode überangepasst.
Rechnen Sie für diese Prozedur mit dreißig bis sechzig Minuten pro Methode. Das ist wenig angesichts des Kapitals, das Sie danach über Monate hinweg einsetzen.
Berechtigte Einwände, ehrlich beantwortet
„Was, wenn der Markt am Sonntagabend mit einem Gap eröffnet?“ Ein ehrlicher Backtest geht nicht von einem Ausstieg exakt zum Stopp-Preis aus. Liegt die Eröffnung darüber hinaus, entspricht der Verlust dem Eröffnungskurs. Bei Gold und Indizes kommen solche Gaps vor: Ihr historisch schlechtester Verlust muss in realen R ausgedrückt werden, nicht in theoretischen. Ein Trade, der bei 1,7R Verlust statt 1R ausgestoppt wird, verändert die Berechnung des Ruinrisikos.
„Wie lange dauert es, bis man weiß, ob es live funktioniert?“ Deutlich länger, als der Backtest nahelegt. Erzeugt Ihre Methode zwei Signale pro Woche, entsprechen hundert Trades fast einem Jahr. Deshalb dient der Backtest dazu, fragile Methoden auszuschließen, nicht eine einzige zu zertifizieren.
„Kann der Backtest das Handelsjournal ersetzen?“ Nein. Er misst Regeln, nicht Ihre Ausführung. Die Lücke zwischen beiden ist Ihr eigentliches Übungsfeld.
Ein Backtest sagt die Zukunft nicht voraus. Er zeigt Ihnen, ob Ihre Regeln anwendbar gewesen wären – und zu welchem psychologischen Preis. Das ist bereits enorm viel.
Diese Kontrollen ab heute in die Praxis umsetzen
Sie können dieses Raster auf jedes System anwenden, auch auf jene, die Ihnen in sozialen Netzwerken angepriesen werden. Stellen Sie die sieben Fragen: Die meisten spektakulären Kurven überstehen nicht einmal die dritte.
Wenn Sie den Ansatz an einer Engine testen möchten, die ihre Annahmen offenlegt – Bestätigung beim Kerzenschluss, pessimistische Ausführungsreihenfolge, ATR- oder struktureller Stopp, Ziele in R-Vielfachen auf 56 Instrumenten und 22 Zeiteinheiten – steht das PIPSTER-PRO-Terminal im Découverte-Paket für 0 € zur Verfügung, und die sieben Rechner bleiben kostenlos, um Ihre R in Währung umzurechnen. Beginnen Sie mit einem Instrument, einer Zeiteinheit, hundert nachgespielten Trades: Das ist lehrreicher als zehn anderswo gefundene Kurven.
Häufige Fragen
Wie viele Trades braucht ein Backtest, um zuverlässig zu sein?
Es gibt keine magische Schwelle, aber unter hundert Trades bleibt die statistische Unsicherheit enorm. Achten Sie vor allem auf Vielfalt: Die Stichprobe sollte mindestens eine Aufwärtstrend-, eine Abwärtstrend- und eine längere Seitwärtsphase abdecken, wenn möglich über mehrere Jahre.
Wie erkennt man, ob ein Indikator repaintet?
Vergleichen Sie das Live-Signal mit dem nachträglichen. Laden Sie den Chart mitten in einer Kerze, notieren Sie die Position der Signale, und laden Sie ihn nach dem Kerzenschluss erneut. Hat sich ein Signal verschoben, ist verschwunden oder hat die Richtung gewechselt, repaintet der Indikator – seine historischen Statistiken sind unbrauchbar.
Muss der Spread wirklich im Backtest berücksichtigt werden?
Ja. Bei XAUUSD kann eine Differenz von wenigen Zehntel-Dollar pro Round-Trip einen spürbaren Anteil Ihres Risikos ausmachen, wenn der Stopp eng gesetzt ist. Rechnen Sie durchschnittlichen Spread, Kommission und eine Slippage-Marge ein und prüfen Sie, ob der Erwartungswert danach noch positiv bleibt.
Wie geht man mit Wochenend-Gaps im Backtest um?
Behandeln Sie sie so ungünstig wie möglich: Öffnet der Kurs jenseits Ihres Stopps, entspricht der Verlust dem Eröffnungskurs, nicht dem theoretischen Stopp. Ein Backtest, der von einem exakten Ausstieg am Stopp nach einem Gap ausgeht, unterschätzt das reale Risiko systematisch.
Bildungsinhalt. Der Handel birgt das Risiko eines Kapitalverlusts; vergangene Wertentwicklungen lassen keinen Rückschluss auf künftige zu. PIPSTER veröffentlicht Analysewerkzeuge, keine Anlageberatung.
Der Handelsplan, für Sie berechnet
Legen Sie Ihr kostenloses Konto an und öffnen Sie das Terminal: Signal, Stopp und Ziele stehen im Chart. Nichts zu installieren.
- Kostenloses Konto, ohne Kreditkarte
- Sieben Rechner frei zugänglich
- Mit einem Klick kündbar
Für das kostenlose Konto wird keine Kreditkarte verlangt.