Überanpassung macht Backtests für Handelssysteme trügerisch

Wenn ein Regelwerk lautet: Einstieg nur nach einem Ausbruch, wenn zugleich mehrere exakt festgelegte Filter erfüllt sind, klingt das zunächst präzise. Doch jede zusätzliche Bedingung kann auch eine zufällige Besonderheit der Vergangenheit festschreiben. Dieses Lernstück zeigt, wie Trader mit erstem Expert Advisor Überanpassung erkennen und ein automatisiert arbeitendes Handelssystem fairer prüfen.

Regeln können Erinnerungen imitieren

Überanpassung, oft auch Overfitting genannt, entsteht, wenn ein System historische Kursverläufe nicht nur auswertet, sondern deren Zufallsrauschen mitlernt. Im Backtest wirkt die Kurve dann möglicherweise ungewöhnlich glatt, während das Regelwerk außerhalb des geprüften Zeitraums an Aussagekraft verliert. Ein typisches Erkennungszeichen ist eine lange Liste fein abgestimmter Bedingungen, deren Werte sich nicht mehr nachvollziehbar begründen lassen.

Auch eine starke Abhängigkeit von wenigen Trades oder einer kurzen historischen Phase verdient Aufmerksamkeit. Funktioniert die Strategie nur mit einem sehr bestimmten Zeitfenster, einem einzelnen Markt oder einer einzigen Einstellung, kann das Ergebnis eher eine Erinnerung an die Stichprobe als eine belastbare Regel sein. Bei CFDs, Futures, Forex und Kryptowerten sind zudem Kursschwankungen und Ausführungsrisiken erheblich, weshalb Risikobegrenzung und ein Demokonto wichtige Lernbestandteile bleiben.

Vier Warnzeichen im Test

Erstens klaffen In-Sample- und Out-of-Sample-Ergebnis deutlich auseinander: Im ersten Abschnitt wurden die Regeln entwickelt, im zweiten werden sie unverändert an unbekannten Daten geprüft. Zweitens bricht die Leistung ein, sobald ein Parameter leicht verändert wird. Drittens sitzt der vermeintlich beste Wert wie eine schmale Spitze zwischen deutlich schlechteren Nachbarwerten. Viertens verschwindet das Ergebnis, wenn realistische Kosten, Slippage oder leicht veränderte Ausführungsannahmen berücksichtigt werden.

Ein Beispiel: Angenommen, ein Expert Advisor nutzt als Parameter ein Rückblickfenster für ein Signal. Liefert nur der Wert 20 ein gutes Backtestergebnis, während 19 und 21 deutlich abfallen, ist Vorsicht angebracht. Bleibt das Ergebnis dagegen über einen breiteren Bereich ähnlich, etwa bei 18 bis 23, spricht diese flache Zone eher für Parameterstabilität. Das ist kein Beweis für eine künftige Eignung, aber ein sinnvolleres Prüfkriterium als der isolierte Spitzenwert.

Der Blindtest nach der Optimierung

Für den Out-of-Sample-Test wird die historische Stichprobe zeitlich getrennt. Zuerst werden Regeln und Parameter ausschließlich im In-Sample-Abschnitt entwickelt. Danach folgt ein bislang unberührter Abschnitt, auf den dieselben Einstellungen ohne Nachjustierung angewendet werden. Wer nach dem Blick auf diesen Test erneut optimiert, macht ihn faktisch zu einem weiteren Trainingsabschnitt.

Eine fortlaufende Variante ist der Walk-Forward-Test: Ein älteres Fenster dient der Optimierung, das unmittelbar folgende Fenster der Prüfung, danach werden beide Abschnitte weitergeschoben. So entstehen mehrere voneinander getrennte Prüfungen. Zusätzlich kann ein Vorwärtstest im Demokonto zeigen, ob die technische Umsetzung, die Überwachung, ein Notaus und der Umgang mit Verbindungsabbrüchen funktionieren. Das ersetzt keine längere eigene Testphase und keine Handelsentscheidung.

Was im Coaching sichtbar wird

Das Coaching zum automatisierten Börsenhandel der trading-house.net AG setzt bei genau dieser Prüflogik an. Im Block Backtesting kann ein Kunde am eigenen Expert Advisor die Trennung von Entwicklungs- und Prüfbereich nachvollziehen, während im Block Konfiguration eines Expert Advisors die Auswahl und Anpassung der Parameter betrachtet wird. Dabei geht es nicht darum, den schönsten Einzelwert zu finden, sondern um die Frage, ob nahe Einstellungen und unterschiedliche Testfenster ein ähnliches Bild ergeben.

Das persönliche 1:1-Coaching zu automatisierten Handelssystemen dauert zwei Stunden und findet per Videochat mit einem Experten der trading-house.net AG statt. Es richtet sich an Kunden der trading-house.net AG und wird individuell auf die offenen Fragen abgestimmt. Die fünf Inhaltsblöcke behandeln diskretionäres gegenüber automatisiertem Trading, Expert Advisors, Backtesting, die Konfiguration eines Expert Advisors sowie Praxis und Strategie mit dem Live-Test eines Expert Advisors und der Entwicklung individueller Handelsstrategien. Die vollständige Inhaltsübersicht steht als PDF auf der Coaching-Seite zum automatisierten Börsenhandel.

Der Preis beträgt 169 Euro. Die Buchung erfolgt über die Coaching-Seite, danach wird kurzfristig ein individueller Termin vereinbart. Fragen vorab können einmalig telefonisch unter +49 30 5900 9110 gestellt werden. Das Gespräch ordnet Begriffe und Prüfschritte, nimmt aber weder das eigene Testen über Wochen noch ein persönliches Risikomanagement ab.

Ein Testplan statt ein Spitzenwert

Überanpassung lässt sich nicht durch einen besonders langen Backtest allein ausschließen. Für Trader mit erstem Expert Advisor ist entscheidend, Regeln vor dem Test festzuhalten, unbekannte Daten wirklich unangetastet zu lassen und nach breiten Parameterzonen statt nach einem einzelnen Rekord zu suchen. Ein zweistündiges 1:1-Coaching kann sinnvoll sein, wenn die Prüfschritte am eigenen System geordnet werden sollen; anschließend braucht es dennoch eine eigenständige Vorwärts- und Beobachtungsphase im Demokonto.

Backtesting und Parameterstabilität im 1:1-Coaching prüfen