Mes paramètres pour le test de robustesse sont-ils trop sévères ?
3 réponses
ybhx0315
il y a 10 ans #115124
Bonjour à tous,
J'avais l'habitude d'effectuer des tests de robustesse de cette manière, en suivant la même méthode que celle mentionnée dans Ebook :
1. J'ai fixé le nombre d'expériences à 200.
2. Je n'effectue qu'un seul type de test à chaque fois. Par exemple, je commence par randomiser les transactions, puis je randomise les paramètres.
3. règle de décision : ret/DD > la moitié du niveau d'origine. La forme doit être bonne.
Avec cette méthode, j'ai obtenu plus de 20 stratégies qui ont passé les tests.
Je tente à présent une approche différente :
1. J'ai fixé le nombre de tests à 1000.
2. J'exécute les 5 premiers types de tests simultanément.
3. la règle de décision est la même.
Aujourd'hui, toutes les stratégies (plus de 20) ont échoué aux tests.
Comment dois-je interpréter ces résultats ? Est-ce que je teste trop ? Ou est-ce un signe que ma stratégie n'est pas robuste ?
Merci de votre réponse.
0
Cujo
il y a 10 ans #136960
Bonjour ybhx0315,
J'ai commencé à être très, très dur sur ma robustesse et je n'ai trouvé aucune stratégie qui passait. Une fois que j'ai compris que je ne cherchais pas seulement le profit sur l'historique, mais que je cherchais des choses comme la capacité à choisir des gagnants, à réduire les pertes/DD, donc ce genre de métriques, pas seulement "combien d'argent a-t-il gagné il y a 10 ans", mais est-ce que le gain % était bon il y a quelques années et est-ce que je pense (grâce à la robustesse) qu'il peut encore prédire des gagnants avec un petit DD aujourd'hui/futur, cela a eu plus de sens. J'ai effectué de multiples tests de robustesse OOS sur des données remontant au milieu des années 1990, et rien ne passait si l'on ne cherchait que le profit. Mais aujourd'hui, je cherche d'autres choses, y compris avec la marche en avant, bien sûr.
La question de la robustesse est également abordée dans le document cette fil.
0
ybhx0315
il y a 10 ans #136974
Bonjour ybhx0315,
J'ai commencé à être très, très dur sur ma robustesse et je n'ai trouvé aucune stratégie qui passait. Une fois que j'ai compris que je ne cherchais pas seulement le profit sur l'historique, mais que je cherchais des choses comme la capacité à choisir des gagnants, à réduire les pertes/DD, donc ce genre de métriques, pas seulement "combien d'argent a-t-il gagné il y a 10 ans", mais est-ce que le gain % était bon il y a quelques années et est-ce que je pense (grâce à la robustesse) qu'il peut encore prédire des gagnants avec un petit DD aujourd'hui/futur, cela a eu plus de sens. J'ai effectué de multiples tests de robustesse OOS sur des données remontant au milieu des années 1990, et rien ne passait si l'on ne cherchait que le profit. Mais aujourd'hui, je cherche d'autres choses, y compris avec la marche en avant, bien sûr.
La question de la robustesse est également abordée dans le document cette fil.
Bonjour Cujo,
Merci pour votre réponse. J'ai suivi votre fil de discussion et permettez-moi de vous faire part de deux de mes découvertes :
1. les résultats des tests de robustesse se stabilisent généralement après 100 exécutions. Je vois donc des résultats similaires après 100 exécutions, 500 exécutions et même 1000 exécutions.
2. Certains résultats de tests de robustesse ont une très bonne forme, mais de très mauvais chiffres. L'inverse est également vrai. Par exemple, le ret/dd original est de 20 et au niveau de confiance 95%, le ret/dd est d'environ 6. Le DD% est presque doublé. Mais les lignes de robustesse sont assez denses au centre et ont l'air jolies. Autre exemple : le ret/dd original est de 4 et au niveau 95%, le ret/dd est d'environ 3. Les lignes de robustesse sont très étendues. Avez-vous remarqué la même chose et comment l'interprétez-vous ?
Merci.
0
Cujo
il y a 10 ans #136979
Bonjour Cujo,
Merci pour votre réponse. J'ai suivi votre fil de discussion et permettez-moi de vous faire part de deux de mes découvertes :
1. les résultats des tests de robustesse se stabilisent généralement après 100 exécutions. Je vois donc des résultats similaires après 100 exécutions, 500 exécutions et même 1000 exécutions.
2. Certains résultats de tests de robustesse ont une très bonne forme, mais de très mauvais chiffres. L'inverse est également vrai. Par exemple, le ret/dd original est de 20 et au niveau de confiance 95%, le ret/dd est d'environ 6. Le DD% est presque doublé. Mais les lignes de robustesse sont assez denses au centre et ont l'air jolies. Autre exemple : le ret/dd original est de 4 et au niveau 95%, le ret/dd est d'environ 3. Les lignes de robustesse sont très étendues. Avez-vous remarqué la même chose et comment l'interprétez-vous ?
Merci.
...une belle courbe d'équité ne sert à rien si elle ruine votre compte car vous ne pourrez pas vous remettre d'un gros DD tant que vous n'aurez pas injecté plus de $.
0
Affichage de 3 réponses de 1 à 3 (sur un total de 3)