Walk-forward-Analyse: Warum man eine Strategie an Daten prüft, die der Optimierer nie gesehen hat

Die Walk-forward-Analyse ist ein Prüfverfahren für Handelssysteme, bei dem die Parameter auf einem Abschnitt der Historie bestimmt werden und das Ergebnis auf dem folgenden Abschnitt gemessen wird, der an der Auswahl noch nicht beteiligt war – und so Fenster für Fenster bis zum Ende der Stichprobe. Es geht nicht darum, eine schöne Kurve zu erhalten, sondern darum, eine echte Gesetzmäßigkeit von einer Überanpassung zu trennen: Ein gewöhnlicher Backtest zeigt, wie das System ausgesehen hätte, wenn Sie die besten Einstellungen im Voraus gekannt hätten, die Walk-forward-Analyse dagegen zeigt, wie es sich verhalten hätte, wenn Sie sie nicht gekannt hätten. Der Unterschied zwischen diesen beiden Bildern ist genau der Preis Ihrer Optimierung.

Was das Verfahren konkret tut

Die Historie wird in aufeinanderfolgende Abschnitte zerlegt. Auf dem ersten Abschnitt – dem Trainingsabschnitt – probieren Sie Parameter durch und wählen einen Satz nach einem vorab festgelegten Kriterium aus. Danach wird dieser Satz eingefroren und auf den nächsten Abschnitt, den Prüfabschnitt, angewendet, ohne dass Sie irgendetwas verändern dürfen. Die Trades im Prüfabschnitt fließen in den Abschlussbericht ein. Anschließend wird das Fenster verschoben: Der bisherige Prüfabschnitt wird den Trainingsdaten hinzugefügt, die Parameter werden neu berechnet, und das System arbeitet erneut „blind“ auf einem neuen Abschnitt. Die zusammengefügte Abfolge aller Prüfabschnitte nennt man Walk-forward-Kurve.

Der entscheidende Punkt der Disziplin ist die Reihenfolge der Schritte. Schritt 1: das Kriterium für die Parameterauswahl festlegen, bevor Sie Ergebnisse gesehen haben. Schritt 2: die Parametersuche ausschließlich auf den Trainingsdaten durchführen. Schritt 3: die eingefrorenen Parameter auf das Prüffenster anwenden und nicht mehr zurückgehen. Sobald Sie nach einem schwachen Prüfergebnis die Auswahlregel ändern, sind die Prüfdaten nicht mehr unbekannt – und das Verfahren wird zu demselben Backtest, nur mit zusätzlichem Rechenaufwand.

Worin der Unterschied zur einfachen Aufteilung der Stichprobe liegt

Eine einmalige Aufteilung der Historie in „Training“ und „Prüfung“ liefert eine einzige Antwort über einen einzigen Zeitraum. Der Markt wechselt jedoch sein Regime: Phasen breiter Trends, Phasen der Verengung, Phasen, in denen die Bewegung vom Leitzins oder vom Wechselkurs bestimmt wird und nicht von der Unternehmensentwicklung. Die statische Aufteilung beantwortet die Frage „Hat das damals funktioniert?“. Die Walk-forward-Analyse beantwortet eine nützlichere Frage: Wie oft konnte die Neuoptimierung mit dem Regimewechsel Schritt halten, und wie schnell veralteten die Einstellungen? Wenn jedes neue Fenster radikal andere Parameter verlangt, ist das System nicht adaptiv – es fängt lediglich Rauschen ein, und die Prüfabschnitte machen das sichtbar.

Gesondert sollte man die Walk-forward-Analyse von der Sensitivitätsanalyse abgrenzen: Letztere fragt, was bei einer Verschiebung des Parameters geschieht, Erstere, was bei einer Verschiebung der Zeit geschieht. Beide ergänzen einander, keines ersetzt das andere. Der gemeinsame Rahmen – die Prüfung einer Hypothese durch eine Regel – wird im Beitrag über quantitative Analyse behandelt.

Rollierendes gegenüber wachsendem Fenster

Ein rollierendes Fenster fester Länge vergisst die ältere Historie: praktisch, wenn Sie davon ausgehen, dass sich die Mikrostruktur des Marktes und der Kreis der Teilnehmer verändern und die ferne Vergangenheit die Gegenwart nicht mehr beschreibt. Ein wachsendes Fenster sammelt die gesamte verfügbare Historie an: robuster gegenüber Zufall, reagiert aber langsamer auf einen Regimebruch. Die Wahl zwischen beiden ist eine inhaltliche Aussage über den Markt und kein technisches Detail, und man sollte sie offen aussprechen: „Ich gehe davon aus, dass die Daten vor der Handelsunterbrechung im Jahr 2022 das aktuelle Regime des russischen Aktienmarktes nicht beschreiben“ – das ist eine Hypothese, die das Walk-forward-Verfahren selbst nicht überprüfen kann.

Was als Ergebnis gilt

Betrachten sollten Sie nicht den besten Durchlauf, sondern die Verteilung der Durchläufe. Nützliche Fragen sind: ob das Prüfergebnis in allen Fenstern positiv geblieben ist; wie viel schlechter die Leistung in der Prüfung gegenüber dem Training ausfällt; ob die gewählten Parameter von Fenster zu Fenster stabil sind; ob die gesamte Kurve nicht an einigen wenigen außergewöhnlichen Trades hängt. Der letzte Punkt ist besonders wichtig: Ein System, dessen Gesamtbilanz von einer Handvoll Episoden bestimmt wird, verhält sich auf neuen Daten unberechenbar, weil Sie nicht eine Regel geprüft haben, sondern ein seltenes Ereignis.

Wo das Verfahren trotzdem täuscht

Erstens gibt es nur eine einzige Historie. Wie viele Fenster Sie auch schneiden, sie stammen aus ein und derselben Realisierung des Marktes und überschneiden sich in den Daten, daher sind die Prüfergebnisse nicht unabhängig. Zweitens: Wenn Sie viele Varianten des Verfahrens selbst durchprobiert haben – Fensterlänge, Häufigkeit der Neuoptimierung, Auswahlkriterium –, passen Sie erneut an, nur eine Ebene höher. Der ehrliche Ausweg besteht darin, die Konstruktion vor dem Start festzulegen und die Zahl der freien Elemente zu begrenzen.

Drittens die Datenqualität. Überlebende Wertpapiere, rückwirkend neu berechnete Dividendenanpassungen, veränderte Indexzusammensetzungen, das Delisting von Depositary Receipts – all das mischt Wissen über die Zukunft bei. Prüfen Sie, auf welcher Liste von Instrumenten das Ergebnis berechnet wurde: Eine Auswahl nach der heutigen Marktzusammensetzung in den Aktienkursen verschiebt die Vergangenheit zu Ihren Gunsten. Dasselbe gilt für die ereignisbezogene Logik: Veröffentlichungs- und Zahlungstermine müssen nach dem tatsächlichen Datum übernommen werden, nicht nach Bequemlichkeit – zum Abgleich gibt es den Ereigniskalender.

Viertens die Kosten. Die Neuoptimierung verändert die Handelsfrequenz, und Spread, Kommission und Slippage fressen in der Regel gerade die hochfrequenten Konfigurationen auf. Sind die Kosten nur grob angesetzt, prüft die Walk-forward-Analyse die Arithmetik, nicht die Strategie. Hier lohnt es sich, an die Grenzen der technischen Analyse zu denken: Ein Validierungsverfahren macht ein schwaches Signal nicht stark.

Die Plattform speichert keine Historie fremder Strategien und veröffentlicht keine Walk-forward-Statistiken dazu, die Prüfung müssen Sie daher mit Ihren eigenen Daten durchführen – hier beschreiben wir nur die Methode und ihre Schwachstellen. Definitionen der Begriffe, die in Beschreibungen solcher Verfahren vorkommen, finden Sie im Glossar.

Wie man eine fremde Walk-forward-Analyse liest

Fragen Sie nach dem, was am liebsten verschwiegen wird: wie viele Parameter durchprobiert wurden und nach welchem Kriterium; ob Kosten berücksichtigt wurden und wie; ob die Liste der Instrumente mit derjenigen übereinstimmt, die zum jeweiligen Datum verfügbar war; ob die gesamte Abfolge der Fenster gezeigt wird oder nur die erfolgreichen. Ein Bericht ohne diese Antworten ist keine Prüfung, sondern eine Präsentation. Und zum Schluss: Ein bis zur Perfektion getriebenes Verfahren wird leicht zum Vorwand, niemals anzufangen – ein Zustand, der einen eigenen Namen hat: Analyseparalyse.