EA-ProgrammierungNordZentrum GmbH & Co. KG EN Projektanfrage

Test · Optimierung · Testnachweis

Expert Advisor testen: Backtest und Optimierung

Die meisten Backtests sind zu optimistisch — nicht wegen der Strategie, sondern wegen der Annahmen. Wir prüfen Ihr Handelssystem unter realistischen Bedingungen, decken systematische Fehler auf und sagen Ihnen offen, was die Zahlen hergeben und was nicht.

Für MetaTrader 5 und 4 sowie cTrader. Auch als eigenständige Leistung für Systeme, die nicht von uns stammen.

01

Leistungsumfang

Ein Backtest ist keine Schaltfläche, sondern ein Prüfverfahren. Diese Bausteine lassen sich einzeln oder gemeinsam beauftragen.

1.1

Datengrundlage

Ohne belastbare Kursdaten ist jedes Ergebnis wertlos.

  • Prüfung der Modellqualität und der vorhandenen Historie
  • Beschaffung und Aufbereitung historischer Kursreihen
  • Erkennung von Datenlücken, Ausreißern und fehlerhaften Kursen
  • Abgleich mehrerer Datenquellen bei abweichenden Ergebnissen
  • Realistische Spreads aus echten Tickdaten statt fester Annahmen
  • Kommission und Swap entsprechend Ihrem Kontomodell
1.2

Prüfung auf systematische Fehler

Die Fehler, die gute Ergebnisse erzeugen und live verschwinden.

  • Look-Ahead-Bias: Zugriffe auf Information, die es noch nicht gab
  • Nachzeichnende Indikatoren in der Signalkette
  • Auswertung laufender Kerzen statt abgeschlossener
  • Survivorship Bias bei Symbolauswahl über längere Zeiträume
  • Unrealistische Ausführung: Kurse, die so nicht handelbar waren
1.3

Optimierung und Robustheit

Nicht den Bestwert suchen, sondern das stabile Gebiet.

  • Walk-Forward-Analyse mit wanderndem Optimierungsfenster
  • Parameterlandschaften statt Ranglisten — Plateau schlägt Spitze
  • Sensitivitätsprüfung gegenüber benachbarten Einstellungen
  • Robustheitstests gegen Slippage, Verzögerung und Datenlücken
  • Prüfung über mehrere Symbole und Zeitebenen hinweg
  • Eigene Bewertungsfunktion, etwa Recovery Factor statt Endgewinn
1.4

Laufzeit und Automatisierung

Wenn Tests Tage dauern, wird zu wenig getestet.

  • Beschleunigung durch Zwischenspeicherung und Testschalter
  • Verlagerung von Tick- auf Kerzenberechnung, wo zulässig
  • Abschaltung von Chartobjekten und Protokollen im Testlauf
  • Automatisierte Läufe über die Kommandozeile im Hintergrund
  • Ablaufsteuerung für Testreihen über viele Parameter und Symbole
  • Serverbetrieb für Dauerläufe außerhalb Ihres Arbeitsrechners
02

Was in einem Testbericht steht

Ein Bericht, der nur eine Kapitalkurve zeigt, ist kein Nachweis. Diese Bestandteile gehören dazu.

Testaufbau Zeitraum, Symbole, Zeitebene, Kontomodell, Startkapital, verwendete Programmversion. Ohne diese Angaben ist ein Ergebnis nicht reproduzierbar.
Datengrundlage Quelle, Modellqualität, Umgang mit Lücken. Bei abweichenden Quellen die Bandbreite der Ergebnisse.
Angesetzte Kosten Spread-Modell, Kommission, Swap, angenommene Slippage. Zusätzlich eine Rechnung mit erhöhten Kosten als Belastungsprobe.
Ergebnisse Aufgeschlüsselt nach Zeitabschnitten und Marktphasen, nicht als eine Gesamtzahl. Mit Anzahl der Handelsgeschäfte, maximalem Drawdown und dessen Dauer.
Robustheit Verhalten bei veränderten Parametern, erhöhter Slippage und verzögerter Ausführung.
Grenzen Was der Test nicht abbildet und welche Annahmen einfließen. Dieser Abschnitt ist der wichtigste und fehlt in den meisten Berichten.

Was ein Testbericht nicht enthält

Keine Aussage darüber, ob die Strategie künftig Gewinn abwirft. Ein Backtest ist eine Auswertung der Vergangenheit unter bestimmten Annahmen — er beschreibt, wie sich ein Regelwerk in bekannten Daten verhalten hätte. Wer daraus eine Prognose ableitet, verwechselt Beschreibung mit Vorhersage.

Wir sagen Ihnen offen, wenn Zahlen aus unserer Sicht nicht tragen — auch dann, wenn das gegen die Beauftragung weiterer Arbeiten spricht.

03

Backtest im MetaTrader 5 durchführen: Schritt für Schritt

Einen ersten Backtest können Sie selbst durchführen. Diese Anleitung zeigt, wie — und an welcher Stelle ein einfacher Test aufhört, aussagekräftig zu sein.

01

Strategietester öffnen

Im Terminal über das Menü Ansicht den Strategietester öffnen, oder mit Strg+R. Er erscheint im unteren Teil des Fensters.

Im MetaTrader 4 heißt er ebenso, ist aber deutlich einfacher aufgebaut
02

Expert Advisor, Symbol und Zeitebene wählen

Im Reiter Einstellungen den Expert Advisor auswählen, dazu das Symbol und die Zeitebene, für die er geschrieben wurde.

Symbolnamen unterscheiden sich je Broker — den Namen verwenden, unter dem später gehandelt wird
03

Zeitraum festlegen

Mehrere Jahre mit unterschiedlichen Marktphasen — Trend, Seitwärtsphase, hohe und niedrige Schwankung. Einen Teil des Zeitraums zurückhalten: Er dient später als Gegenprobe.

Ein Test über wenige Monate sagt über die Zukunft fast nichts aus
04

Modellierung wählen

Für belastbare Ergebnisse die Einstellung, die auf echten Ticks beruht, sofern der Broker diese Daten liefert. Nur sie bildet Spread und Ausführung innerhalb einer Kerze realistisch ab. Für schnelle Vorversuche genügen Minutenwerte.

Die Modellierung entscheidet bei Systemen mit engen Stops über das Ergebnis
05

Einlage, Hebel und Verzögerung

Kontostand und Hebel so wählen, wie sie später tatsächlich sind. Wo verfügbar, eine Ausführungsverzögerung einstellen — ohne sie tut der Test so, als würde jede Order sofort ausgeführt.

Kommissionen einrechnen, sofern der Broker sie getrennt vom Spread berechnet
06

Starten und Ergebnisse lesen

Nach dem Durchlauf zeigt der Reiter Backtest die Kennzahlen, der Reiter Diagramm den Verlauf des Kontostands. Aussagekräftiger als der Nettogewinn sind der größte Rückgang, der Profitfaktor, die Zahl der Trades und der Verlauf der Kurve.

Welche Kennzahl wirklich zählt, steht im Praxiswissen, Gruppe B
07

Gegenprobe im zurückgehaltenen Zeitraum

Den Test mit denselben Einstellungen über den zurückgehaltenen Zeitraum wiederholen. Bricht das Ergebnis dort ein, ist das System an die Vergangenheit angepasst, nicht an den Markt.

Das ist die einfachste Form der Prüfung auf Überanpassung

Wo diese Anleitung endet

Ein einzelner Backtest mit Gegenprobe zeigt, ob ein System grundsätzlich funktioniert. Er zeigt nicht, ob es robust ist: Dafür braucht es eine Walk-Forward-Analyse über mehrere Zeitfenster, die Prüfung auf Blick in die Zukunft, realistische Kosten und eine Einschätzung, wie empfindlich das Ergebnis auf kleine Änderungen der Parameter reagiert. Das leisten wir als Prüfung mit schriftlichem Bericht.

04

Konditionen

Prüfleistungen werden nach Aufwand abgerechnet, weil der Umfang vom System und vom gewünschten Prüftiefe abhängt.

89,25 € / Stunde
brutto, entsprechend 75,00 € zuzüglich 19 Prozent Umsatzsteuer. Nach einem kurzen Erstgespräch erhalten Sie eine Aufwandsschätzung mit Obergrenze, die nicht überschritten wird.
Prüfung eines Systems Sichtung des Quelltextes auf Look-Ahead-Bias, nachzeichnende Indikatoren und unrealistische Annahmen, mit schriftlichem Befund.
Testreihe mit Bericht Durchführung über einen vereinbarten Zeitraum mit realistischen Kosten, Robustheitsprüfungen und schriftlichem Bericht.
Walk-Forward-Analyse Aufbau und Durchführung einschließlich Auswertung der Parameterstabilität.
Laufzeitoptimierung Beschleunigung bestehender Systeme. Der Aufwand amortisiert sich meist nach wenigen Testreihen.
05

Häufige Fragen zu Backtests

Warum ist mein Backtest deutlich besser als der Livebetrieb?

Die häufigsten Ursachen sind unrealistische Spread-Annahmen, fehlende Kommissionen und Swap-Sätze, unzureichende Datenqualität sowie Look-Ahead-Bias, bei dem Signale auf noch laufenden Kerzen oder nachzeichnenden Indikatoren beruhen. Eine Trefferquote über achtzig Prozent sollte immer zuerst auf Look-Ahead-Bias geprüft werden, bevor irgendetwas anderes betrachtet wird.

Was ist eine Walk-Forward-Analyse?

Statt die Parameter über den gesamten Zeitraum zu optimieren, wird auf einem Abschnitt optimiert und auf dem unmittelbar folgenden unverändert getestet. Dann wandert das Fenster weiter und der Vorgang wiederholt sich. Das Ergebnis zeigt, wie sich das System verhalten hätte, wenn man es tatsächlich regelmäßig nachjustiert hätte — und nicht, wie es aussieht, wenn man die Zukunft schon kannte.

Woran erkenne ich Überanpassung?

Nicht am Bestwert, sondern an dessen Umgebung. Wenn benachbarte Parametereinstellungen deutlich schlechter abschneiden, haben Sie eine Zufälligkeit gefunden. Ein breites Plateau ähnlich guter Ergebnisse ist dagegen ein belastbares Zeichen. Als Faustregel gilt außerdem: Je mehr optimierbare Parameter, desto größer die Gefahr — bei vier bis fünf ist meist Schluss.

Welche Kennzahl ist aussagekräftiger als der Endgewinn?

Jede, die den Ertrag ins Verhältnis zum eingegangenen Risiko setzt. Gebräuchlich sind der Recovery Factor, also Nettogewinn geteilt durch maximalen Drawdown, sowie Profitfaktor und Sharpe Ratio unter Berücksichtigung der Anzahl an Handelsgeschäften. Im MetaTrader lässt sich eine eigene Bewertungsfunktion hinterlegen, die zusätzlich die Gleichmäßigkeit der Kapitalkurve bewertet.

Wie lange sollte ein Testzeitraum sein?

Wichtiger als die Dauer ist, dass unterschiedliche Marktphasen enthalten sind: Trend, Seitwärtsbewegung, Volatilitätsschübe, mindestens ein größerer Einbruch. Ein Jahr ruhiger Aufwärtsbewegung sagt weniger aus als drei Jahre mit gemischtem Verlauf. Ebenso wichtig ist eine ausreichende Zahl an Handelsgeschäften — unter hundert sind Kennzahlen kaum belastbar.

Können Sie einen Testbericht erstellen, den ich weitergeben kann?

Ja. Der Bericht enthält Testaufbau, Datenquelle und -qualität, angesetzte Kosten, Ergebnisse je Zeitabschnitt, Robustheitsprüfungen und eine Einordnung der Grenzen. Er enthält bewusst keine Aussage darüber, ob die Strategie künftig funktioniert — das kann niemand seriös feststellen.

Meine Optimierung läuft tagelang. Lässt sich das beschleunigen?

Meistens erheblich. Typische Ursachen sind Berechnungen, die bei jedem Tick statt bei jedem Kerzenwechsel erfolgen, wiederholte Anfragen an Zeitreihen und Chartobjekte, die im Testlauf gar nicht sichtbar sind. Eine Beschleunigung um den Faktor zehn und mehr ist keine Seltenheit.

Bewerten Sie auch meine Strategie inhaltlich?

Wir sagen Ihnen, was die Zahlen hergeben und wo die Prüfung an Grenzen stößt. Was wir nicht tun: eine Prognose abgeben, ob die Strategie künftig Gewinn abwirft. Ein Backtest ist eine Aussage über die Vergangenheit unter bestimmten Annahmen — nicht mehr, aber auch nicht weniger.

Lassen Sie Ihr System prüfen

Schicken Sie uns den Quelltext und eine kurze Beschreibung, was Sie wissen möchten. Sie erhalten eine Aufwandsschätzung mit Obergrenze — kostenfrei und unverbindlich.

EA-Programmierung ist ein Angebot der NordZentrum GmbH & Co. KG: Expert Advisors, Indikatoren und Handelssysteme für MetaTrader 5 und 4, cTrader, TradingView und ATAS, entwickelt von Dipl.-Inf. André Liebetrau, seit 2009 als Entwicklungsdienstleister. Festpreis nach schriftlicher Spezifikation, vollständiger Quelltext im Lieferumfang.

Prüfung anfragen

Welche Fehler einen Backtest wertlos machen, steht im Praxiswissen, Gruppe B. Wie der Strategietester von TradingView im Vergleich abschneidet, im Plattformvergleich.