Aide pour les tests de robustesse
2 réponses
BaobáTeam Simons
il y a 1 an #288953
Bonjour à tous,
Je suis un débutant dans le monde merveilleux de SQX et j'ai quelques questions auxquelles je n'ai pas trouvé de réponses concluantes. J'aimerais connaître l'avis des utilisateurs plus expérimentés de la communauté.
J'ai suivi tous les tests de robustesse disponibles dans mon pipeline. Dans l'ensemble, je trouve des stratégies qui parviennent à passer les tests de robustesse (avec des ajustements spécifiques pour chaque actif et ses nuances).
J'ai commencé à remarquer que les stratégies qui n'ont pas réussi Monte Carlo, WFM ou SPP ont aussi semblent être de bonnes stratégies. J'ai effectué un backtest sur d'autres périodes que celles que j'ai utilisées pour construire ma stratégie, et les résultats ont été positifs avec des statistiques similaires.
Cela dit, j'aimerais connaître l'avis de membres plus expérimentés sur les tests de robustesse. Je comprends que le fait de réussir tous les tests rendrait les statistiques plus fiables lorsqu'elles seraient déployées dans un environnement réel, mais quelle est l'importance de cet aspect pour le succès d'un algorithme ? Cela fait-il vraiment une différence lors de la production d'un algorithme ?
Comme j'ai peu d'expérience avec SQX, je n'ai pas assez de données pour réfuter l'hypothèse selon laquelle la réussite de ces tests conduit à un plus grand succès dans un environnement réel. Je suis en train de le tester sur un compte de démonstration et je pourrai partager les résultats plus tard.
Merci d'avance pour votre aide et vos avis !
1
Jason
il y a 1 an #289002
Je construis des algos depuis environ 4 ans, mais je n'utilise SQx que depuis quelques mois. J'ai acheté la licence de niveau supérieur et j'ai trouvé que le cours de formation de SQx était excellent. Au fil des ans, j'ai appris un certain nombre de choses. Voici ce que je pense savoir :
1. Il n'existe pas de test en or pour déterminer si une stratégie se comportera sur des données réelles comme elle s'est comportée sur des données historiques, mais une série de tests vous donne une meilleure idée de la manière dont la stratégie *devrait* se comporter. Cela vous permet d'évaluer la stratégie sur des données réelles avec une certaine confiance en ce que vous pouvez attendre. Cette confiance sur ce que vous *pouvez* attendre devrait informer (fournir un retour d'information) sur les critères que vous voulez personnellement définir pour la stratégie. Par exemple, je ne trade pas une stratégie avec un taux de gain inférieur à 50%. Je trouve que cela me permet d'évaluer une nouvelle stratégie rapidement (20 - 30 trades) ET je suis plus à l'aise avec ce type de stratégie. Par exemple, si vous tradiez une stratégie avec un taux de gain de 20%, vous devriez nécessairement prévoir BEAUCOUP de pertes pour déterminer si vous obtenez une courbe d'équité acceptable.
2. Le dernier test OOS est très important pour moi. J'ai découvert que si une stratégie réussit les 3 sections de données historiques (je divise mes données historiques en 3 parties égales), elle a de bonnes chances de réussir sur les données réelles.
3. Les tests Monte Carlo sont utilisés pour mesurer certains aspects de votre stratégie. J'aime particulièrement le test de Monte Carlo des paramètres parce qu'il vous montre les différents "futurs" possibles pour votre stratégie. J'aime voir une stratégie avec un éventail serré de différentes courbes d'équité et j'élimine les stratégies qui ont une courbe d'équité bizarre. Cette partie est un peu subjective, mais je préfère faire échouer une bonne stratégie plutôt que d'en adopter une mauvaise. L'unité centrale peut en chercher de nouvelles, cela ne la dérange pas.
4. Les différents tests de marché et de délais me permettent de vérifier si ma stratégie est logique. Mes stratégies n'ont pas besoin de réaliser des performances exceptionnelles lors de ces tests, mais elles doivent rapporter de l'argent. Si votre stratégie est performante sur un large éventail de titres et d'échéances, il y a peu de chances que sa courbe s'adapte à un titre et à une échéance en particulier.
Après avoir effectué le dernier test OOS (dernier tiers des données), je recherche une courbe d'équité régulière que je n'hésiterais pas à trader et qui doit rapporter de l'argent de manière constante. Pour être honnête, je ne passe pas une stratégie qui a perdu de l'argent au cours des deux dernières années, mais si elle a eu une année perdante en 2009 ou quelque chose comme ça, j'envisage de la passer. Cela dépend vraiment de la quantité d'argent perdue en un an. J'aime aussi jeter un coup d'œil à la période de stagnation. Je ne veux pas d'une période de stagnation supérieure à 180 jours. J'essaie de modéliser et de classer les stratégies en fonction de ce que je voudrais personnellement négocier. Je ne pense pas que tout le monde le fasse, mais c'est ainsi que je procède.
Si ma stratégie répond à toutes ces exigences, je la soumets à un WFA et j'examine les permutations des différents paramètres, et j'ai une configuration WFA personnalisée qu'elle doit réussir. Je veux voir que mon PF et mon drawdown sont assez proches. En particulier le PF. Je veux savoir si les paramètres les plus probables sont proches des paramètres testés. J'avais l'habitude de considérer le WFA comme le Saint-Graal des tests, mais ce n'est plus le cas aujourd'hui. Certaines stratégies n'ont probablement pas besoin d'un WFA, mais j'aime en effectuer un pour donner à mes stratégies la possibilité de s'adapter à l'évolution des conditions du marché.
La dernière partie n'est pas vraiment un test, mais je la trouve utile. Je ne m'enthousiasme pas pour une stratégie, je veux toute une équipe de stratégies sur différents titres qui me donnent une belle courbe d'équité lisse avec des rendements non corrélés. Je préfère négocier toute une série de stratégies à facteur de profit 1,5 sur différents produits à terme plutôt qu'une seule stratégie à facteur de profit 2,5. Enfin, ne négociez pas de stratégies qui vous rendent très nerveux ou que vous ne voudriez pas négocier de manière discrétionnaire. Pour moi, cela signifie que je ne traderai pas une stratégie avec un taux de gain inférieur à 50%, je veux un ret/dd élevé (8 ou mieux, je préférerais 16 ou mieux) et je ne veux pas d'un système qui risque plus de 2% de mon compte sur un seul trade. C'est important parce que vous devez avoir un niveau de risque raisonnable pour le titre que vous négociez et le timeframe*ATR sur lequel vous négociez. Je pense que beaucoup de gens négocient des miniatures sans se rendre compte qu'un mini-contrat sur ES ou NQ peut nécessiter $2000 - $5000 par transaction sur l'échelle de temps d'une heure. Si vous risquez $5k par trade et que vous suivez la règle 2%, vous avez besoin de $250k sur votre compte de trading. Ce n'est pas une petite somme d'argent. Je suis la règle 2% et comme dernière vérification, je prends le drawdown maximum du backtest et je le double. Ainsi, si le drawdown maximum est de $10k sur l'ensemble du backtest, je dois être à l'aise avec une perte maximum de $20k (le mot confort n'est peut-être pas le bon, mais vous voyez ce que je veux dire). Si la stratégie passe toutes ces considérations, elle va dans une trémie de stratégies négociables et je laisse le compositeur de portefeuille de SQx me dire quelle combinaison de stratégies doit être négociée.
J'espère que tout cela vous aidera.
1
Chad Lin
il y a 1 an #289930
Merci Jason, des expériences très impressionnantes !
Pourriez-vous nous faire part de vos impressions sur SQX ? Ceci est utile.
0
Affichage de 2 réponses de 1 à 2 (sur un total de 2)