Hilfe bei Robustheitstests
2 Antworten
BaobáTeam Simons
vor 1 Jahr #288953
Hallo zusammen,
Ich bin ein Anfänger in der wunderbaren Welt von SQX und habe einige Fragen, auf die ich keine schlüssigen Antworten gefunden habe. Ich würde gerne die Meinung von erfahreneren Benutzern in der Gemeinschaft hören.
Ich habe alle verfügbaren Robustheitstests in meiner Pipeline verfolgt. Insgesamt finde ich Strategien, die die Robustheitstests bestehen (mit spezifischen Anpassungen für jeden Vermögenswert und seine Nuancen).
Ich habe festgestellt, dass Strategien, die Monte Carlo, WFM oder SPP nicht bestanden haben, auch scheinen gute Strategien zu sein. Ich habe einen Backtest mit zusätzlichen Zeiträumen durchgeführt, die über die Zeiträume hinausgehen, die ich für die Entwicklung meiner Strategie verwendet habe, und sie zeigten positive Ergebnisse mit ähnlichen Statistiken.
Dennoch würde ich gerne die Meinung erfahrener Mitglieder zu Robustheitstests hören. Ich verstehe, dass das Bestehen aller Tests die Statistiken zuverlässiger machen würde, wenn sie in einer realen Umgebung eingesetzt werden, aber wie wichtig ist dies für den Erfolg eines Algorithmus? Macht es wirklich einen Unterschied, wenn ein Algorithmus entwickelt wird?
Da ich wenig Erfahrung mit SQX habe, verfüge ich nicht über genügend Daten, um die Hypothese zu widerlegen, dass das Bestehen dieser Tests zu einem größeren Erfolg in einer realen Umgebung führt. Ich teste es mit einem Demokonto und kann die Ergebnisse später mitteilen.
Vielen Dank im Voraus für Ihre Hilfe und Meinungen!
1
Jason
vor 1 Jahr #289002
Ich entwickle seit etwa 4 Jahren Algos, aber ich benutze SQx erst seit ein paar Monaten. Ich habe die Top-Tier-Lizenz gekauft, und ich fand den Schulungskurs von SQx sehr gut. Im Laufe der Jahre habe ich ein paar Dinge gelernt. Hier ist, was ich denke, dass ich weiß:
1. Es gibt keinen goldenen Test, um festzustellen, ob eine Strategie auf Live-Daten genauso funktioniert wie auf historischen Daten, aber eine Reihe von Tests gibt Ihnen ein besseres Gefühl dafür, wie die Strategie funktionieren *sollte*. Dadurch können Sie die Strategie auf Live-Daten mit einer gewissen Zuversicht auf das, was Sie erwarten können, bewerten. Dieses Vertrauen in das, was Sie erwarten *können*, sollte Ihnen Aufschluss darüber geben (Feedback geben), welche Kriterien Sie persönlich für die Strategie festlegen möchten. Zum Beispiel handle ich keine Strategie mit einer Gewinnrate von weniger als 50%. Ich finde, dass ich so eine neue Strategie schnell live bewerten kann (20 - 30 Trades) UND ich fühle mich mit dieser Art von Strategie wohler. Wenn Sie zum Beispiel eine Strategie mit einer Gewinnrate von 20% handeln würden, müssten Sie zwangsläufig eine Menge Verluste einkalkulieren, um festzustellen, ob Sie eine akzeptable Equity-Kurve erhalten.
2. Der letzte OOS-Test ist für mich sehr wichtig. Ich habe festgestellt, wenn eine Strategie alle 3 Abschnitte der historischen Daten besteht (ich teile meine historischen Daten in 3 gleiche Teile), dann hat sie eine gute Chance auf Erfolg bei Live-Daten.
3. Die Monte-Carlo-Tests dienen dazu, bestimmte Aspekte Ihrer Strategie zu messen. Ich mag die Monte-Carlo-Parameter besonders, weil sie Ihnen die verschiedenen möglichen "Zukünfte" für Ihre Strategie zeigen. Ich mag es, eine Strategie mit einem engen Fächer von verschiedenen Equity-Kurven zu sehen, und ich schmeiße Strategien raus, die eine seltsame Equity-Kurve haben. Dieser Teil ist etwas subjektiv, aber ich lasse lieber eine gute Strategie durchfallen als eine schlechte. Die CPU kann nach neuen Strategien suchen, das macht ihr nichts aus.
4. Die verschiedenen Markttests und die Tests mit den verschiedenen Zeitrahmen geben mir einen Bauch-Check, ob meine Strategie logisch sinnvoll ist. Meine Strategien müssen bei diesen Tests nicht überragend abschneiden, aber sie müssen Geld einbringen. Wenn Ihre Strategie in einem breiten Spektrum verschiedener Wertpapiere und Zeitrahmen erfolgreich ist, ist die Wahrscheinlichkeit, dass ihre Kurve auf ein bestimmtes Wertpapier und einen bestimmten Zeitrahmen zugeschnitten ist, gering.
Nachdem ich den Last OOS-Test durchgeführt habe (das letzte Drittel der Daten), suche ich nach einer glatten Aktienkurve, die ich gerne handeln würde, und sie muss beständig Geld verdienen. Um ehrlich zu sein, gebe ich eine Strategie, die in den letzten Jahren Geld verloren hat, nicht weiter, aber wenn sie ein Verlustjahr wie 2009 oder so hat, ziehe ich sie in Betracht. Es kommt wirklich darauf an, WIE viel sie in einem Jahr verloren hat. Ich werfe auch gerne einen Blick auf die Stagnationsperiode. Ich möchte keine Stagnationsperiode von mehr als 180 Tagen. Ich versuche, Strategien so zu modellieren und zu bewerten, wie ich sie persönlich handeln würde. Ich glaube nicht, dass das jeder macht, aber so mache ich es.
Wenn meine Strategie all das besteht, dann lasse ich sie durch einen WFA laufen und schaue mir die Permutationen der verschiedenen Parameter an, und ich habe ein benutzerdefiniertes WFA-Setup, das sie bestehen muss. Ich möchte sehen, dass mein PF und mein Drawdown ziemlich nahe beieinander liegen. Insbesondere der PF. Ich möchte wissen, dass die wahrscheinlichsten Metriken nahe an den im Backtesting ermittelten Metriken liegen. Früher hielt ich den WFA für den heiligen Gral der Tests, aber das glaube ich jetzt nicht mehr. Einige Strategien brauchen wahrscheinlich keinen WFA, aber ich führe ihn gerne durch, um meinen Strategien die Möglichkeit zu geben, sich an veränderte Marktbedingungen anzupassen.
Der letzte Teil ist nicht wirklich ein Test, aber ich finde ihn hilfreich. Ich begeistere mich nicht für eine Strategie, sondern für ein ganzes Team von Strategien für verschiedene Wertpapiere, die mir eine schöne glatte Aktienkurve mit unkorrelierten Renditen liefern. Ich würde lieber eine ganze Reihe von Gewinnfaktor-1,5-Strategien für verschiedene Futures-Produkte handeln als eine einzige PF-2,5-Strategie. Und schließlich: Handeln Sie keine Strategien, die Sie super nervös machen, oder Sie würden nicht mit diskretionären Anlagen handeln wollen. Für mich bedeutet das, dass ich nicht mit einer Strategie mit weniger als 50% Gewinnrate handeln werde, ich möchte ein hohes ret/dd (8 oder besser, ich würde ein 16 oder besser bevorzugen) und ich möchte kein System, das mehr als 2% meines Kontos bei einem einzigen Handel riskiert. Dies ist wichtig, weil Sie ein angemessenes Risiko für das von Ihnen gehandelte Wertpapier und den Zeitrahmen*ATR, auf dem Sie handeln, haben müssen. Ich glaube, viele Leute handeln mit Minis, ohne zu wissen, dass ein Mini-Con auf ES oder NQ $2000 - $5000 pro Trade auf dem 1-Stunden-Zeitrahmen benötigen könnte. Wenn Sie $5k pro Handel riskieren und die 2% Regel befolgen, brauchen Sie $250k in Ihrem Handelskonto. Das ist kein kleiner Geldbetrag. Ich halte mich an die 2%-Regel und als letzte Kontrolle nehme ich den maximalen Drawdown des Backtests und verdopple ihn. Wenn also der maximale Drawdown im gesamten Backtest $10k beträgt, dann muss ich mich mit einem maximalen Verlust von $20k wohlfühlen (vielleicht ist "wohlfühlen" nicht das richtige Wort, aber Sie verstehen schon). Wenn die Strategie all diese Überlegungen besteht, kommt sie in einen Hopper mit handelbaren Strategien, und ich lasse mir vom Portfolio-Composer von SQx sagen, welche Mischung von Strategien ich handeln soll.
Ich hoffe, das alles hilft.
1
Chad Lin
vor 1 Jahr #289930
Danke Jason, sehr beeindruckende Erfahrungen!
Könnten Sie bitte weitere Erfahrungen über SQX mitteilen? Dies ist hilfreich.
0
Ansicht von 2 Antworten - 1 bis 2 (von insgesamt 2)