LECTURE SEULEMENT

Le forum est désormais une archive en lecture seule.

Pour les rapports de bogues et les questions relatives à la plateforme → [email protected]

Notre communauté vit sur Discord et YouTube - rejoignez-nous !

JOIGNEZ-NOUS SUR Discord YouTube

Jusqu'à quel point la robustesse est-elle suffisante ?

31 réponses

Cujo

Client, bbp_participant, communauté, 97 réponses.

Visiter le profil

il y a 10 ans #115074

Quels paramètres utilisez-vous pour les tests de robustesse de Monte Carlo ? Je comprends que l'on ne peut jamais être trop prudent, qu'il s'agit d'argent et qu'il faut être certain, donc je ne veux pas trop réduire les tests de robustesse, mais...

 

J'ai commencé par l'image du haut. Toutes les stratégies testées n'ont pas seulement échoué, mais ont été très, très, très mauvaises. Cela m'a fait penser que mes paramètres (image du haut) sont peut-être trop sévères. Cela transformerait des stratégies modérément réussies, utilisant les mêmes données IS pour le Monte Carlo, non pas en une simple destruction de compte, mais en une oblitération totale.

 

En additionnant tout cela, par exemple, il y a 60% de chances que quelque chose se produise, comme 20% de changement de paramètre, ou 20% de changement de prix, etc... logiquement, cela semble très lourd.

 

Où j'ai commencé

6jtN7Fe.png

 

J'ai fait quelques expériences, en pensant d'abord que si je prenais un tas de stratégies, sur le même SI, que je les soumettais à la simulation de Monte Carlo, et que je la modifiais pour que le bénéfice net le plus robuste soit de ~10% de part et d'autre, c'était peut-être à peu près juste. Mais j'ai eu l'impression d'optimiser un peu trop le risque en recherchant un résultat spécifique avec mes paramètres de robustesse, ce qui ne me semblait pas correct (et qui était de toute façon très difficile).

 

Puis j'ai pensé - je sais, je vais juste tout diviser par deux, ce qui laisse toujours une possibilité de 30% que quelque chose se passe, comme un échange est sauté ou un changement de paramètre, etc... ce qui m'a laissé avec ce qui suit....

 

Où j'en suis

E7kT8xy.png

 

 

Puis j'ai commencé à douter de ce que je faisais, et j'ai donc décidé de demander conseil. Quels paramètres utilisez-vous pour tester la robustesse de la simulation de Monte Carlo ? Peut-être que l'image 2 est trop lourde ?

 

 

Nombre de simulations de Monte Carlo à effectuer

Cela m'a fait réfléchir sur le nombre de simulations à effectuer :

  • 5000 c'est un peu suffisant, 7500 c'est mieux et 10 000 c'est trop. une étude qui a étudié les études sur les simulations de Monte Carlo.
  • 500-1000 est suffisant si vous testez des armes, mais les résultats se stabilisent après ~500. Je suppose que la différence entre 98% mortes et 95% mortes n'a pas d'importance.
  • Au moins 440 foissi vous utilisez un logiciel d'analyse de risque professionnel dédié (note : analyseur de risque professionnel et non trader professionnel).
  • D'après de nombreuses lectures, le nombre de fois qu'il faut l'exécuter dépend de l'écart-type des données sur lesquelles on l'exécute.

En ce qui concerne le nombre de fois où il faut l'exécuter pour évaluer le système de négociation, le courtier ambi conseille 1000 (ici et ici), Vanguard do 5000 est la recommandation la plus basse que j'ai trouvée. 500Mais le meilleur conseil semble être de l'échelonner autour de 4000, en fonction du nombre de paramètres de votre système... combien en utilisez-vous ?

 

J'ai changé mon niveau de confiance de 95% à 98%, ce qui m'a permis de me sentir plus confiant, mais je me demande toujours quels paramètres utiliser... ??

0

Cujo

Client, bbp_participant, communauté, 97 réponses.

Visiter le profil

il y a 10 ans #137131

La méthode Monte Carlo est-elle appliquée à l'ensemble des séries de données sélectionnées, ou seulement à l'IS ou à l'OOS ?

 

Par exemple, si je teste sur 2004 et 2005, avec 50% IS/OOS, est-ce que la méthode Monte Carlo est exécutée sur 2004 et 2005 ? Le savez-vous ?

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137132

La méthode Monte Carlo est-elle appliquée à l'ensemble des séries de données sélectionnées, ou seulement à l'IS ou à l'OOS ?

 

Par exemple, si je teste sur 2004 et 2005, avec 50% IS/OOS, est-ce que la méthode Monte Carlo est exécutée sur 2004 et 2005 ? Le savez-vous ?

 

Le manuel de la SQ est votre ami ! 🙂 .

Si vous ne lisez pas le manuel, vous pouvez lire la page Robustesse voir les captures d'écran : Les résultats dans le tableau sont pour les données complètes (dans l'échantillon + hors de l'échantillon).

 

J'ai un autre problème que j'exposerai dans le prochain message.

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137133

Vérifiez ceci, Monte Carlo est basé sur le hasard, donc si vous appuyez plusieurs fois sur RUN, vous obtiendrez des résultats absolument différents dans la section MC. C'est correct, mais cela va à l'encontre de l'objectif du test.

C'est comme la loterie pour les stratagèmes. on peut juste gagner au hasard 🙂 .

Ma question est donc simple : combien de fois dois-je appuyer sur RUN ?

Je peux faire réussir ou échouer toutes les stratégies en utilisant simplement le bouton RUN.

Voir la capture d'écran.

 

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137139

Alors comment puis-je faire confiance à quelque chose qui dépend totalement de la CHANCE ?

il fonctionne comme prévu, aucune question n'est posée à son sujet car il est clairement indiqué dans les descriptions : Randomize this and this .

 

L'aléatoire, c'est la chance 🙂 .

Mais nous faisons confiance à la chance pour sélectionner une stratégie de travail. C'est vraiment ironique 🙁

 

Quelqu'un ayant un diplôme spécifique peut-il nous faire part de ses commentaires ?

 

Je n'aurais jamais dû appuyer deux fois sur "START", je soutiens MC depuis plus de dix ans.

Maintenant, je suis complètement perdu, car j'ai fait un petit test avec 5 stratégies, les rendant rentables avec 100% de confiance et ensuite les prochains tests, ont complètement échoué !

 

Mais mieux vaut tard que jamais, n'est-ce pas ?

 

Merci d'avance pour vos commentaires.

0

Patrick

Client, bbp_participant, communauté, 422 réponses.

Visiter le profil

il y a 10 ans #137140

Le test RT ne repose pas sur la chance.

 

1000 tests, c'est statistiquement "100% sûrs", mais en général, pour le filtrage brut, 100 exécutions suffisent. 

 

Bien sûr, quand on fait 10 essais, ce n'est pas suffisant pour voir toutes les possibilités - c'est pour cela que c'est bon et que c'est mauvais après.

 

Quand on fait 100 essais d'abord et après 1000 essais, ce qui passe par 100 passera par 1000. mais 10 essais, c'est vraiment ridicule.

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137142

Merci Patrick, 1000 tests c'est la même chose que de faire 100 fois avec 10test 🙂 .

Ce sujet prouve donc que le pouvoir des nombres est une réalité et que toute personne souhaitant réaliser un test 100 doit le lire.

J'ai effectué 10 tests juste pour prouver le bien-fondé de ma démarche, laissez-moi d'abord en faire 1000 car cela pourrait aussi arriver 🙂 car même 1000 ne couvriront pas des possibilités infinies mais nous donneront plus de confiance dans la stratégie.

 

Je reviendrai avec d'autres tests, car je veux clore ce dossier aujourd'hui.

0

Patrick

Client, bbp_participant, communauté, 422 réponses.

Visiter le profil

il y a 10 ans #137143

Non, c'est différent. 1000 tests n'est pas 10×100 tests, dans 10×100 tests certains tests peuvent se répéter. dans 1000 tests chaque test est différent des autres. aucun test n'est répété contrairement à 10×100 tests.

 

il n'est pas nécessaire d'en faire 1000, 100 suffisent pour voir les résultats les plus probables de la simulation. de légères déviations peuvent se produire - l'important est que la plupart des actions soient en hausse. il n'est pas important d'avoir toutes les actions en pleine forme.

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137144

Tests 10x

  Tests de robustesse sur la stratégie USDJPY-M15-14.40
Test de l'USDJPY-M15-14.40 ..... 6.219 s.
FAIT en 7.641 s.

 

Tests 100x

  Tests de robustesse sur la stratégie USDJPY-M15-14.40
Test de l'USDJPY-M15-14.40 ..... 55.067 s.
FAIT en 58.442 s.

 

Tests 1000x

  Tests de robustesse sur la stratégie USDJPY-M15-14.40
Test de l'USDJPY-M15-14.40 ..... 542.407 s.
FAIT en 566.611 s.

 

Merci encore Patrick,

Passons maintenant aux questions relatives à la vitesse du test.

Je teste sur un serveur et j'utilise seulement 32 cœurs pour l'instant avec 32GB RAM (je vais augmenter jusqu'à 128Core/128GB). Pendant ce test, le CPU n'est pas utilisé (6%), la RAM est d'environ 6GB (il en reste beaucoup), le disque n'est pas utilisé.

SQ est configuré pour utiliser les 32 cœurs, mais il ne les utilise pas. Cependant, dans WFO, les 32 cœurs sont équipés de 80-90%.

Pouvez-vous nous expliquer que le traitement de ces 100 tests prend beaucoup de temps, 10 tests prennent 58 secondes, donc 100 prendront environ 10 minutes, je suppose qu'il est préférable de faire la corrélation d'abord et d'éliminer les stratégies répétées, puis de faire une simulation de test robuste. 

 

Veuillez nous conseiller.

Merci.

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137145

J'ai adopté une stratégie dont la courbe d'égalité n'est pas significative, juste pour le plaisir de tester.

Et exécutez tous les tests 10x / 100x / 1000x ,

Dans ce cas, la différence est très faible, et il n'y a pratiquement aucune différence entre les tests 100x et 1000x.

voir mes tests ci-dessous :

Je vais essayer de trouver quelque chose de mieux pour voir si cela change beaucoup avec le nombre de tests, mais j'utilise des paramètres robustes comme indiqué dans mon premier message, je suppose que c'est exagéré, mais c'est ce que Mark / Partic a mis par défaut 🙂 lol

Merci pour vos commentaires.

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137146

Tous les tests précédents ont été effectués sur Dukas Copy M15 avec une résolution M1

Il est maintenant temps d'utiliser des données en temps réel

En effectuant des tests 100x, tous ont réussi ! mais la stratégie originale a échoué lamentablement.

 

La stratégie a été générée sur M15 (Timeframe sélectionné uniquement) et non sur M1/Tick, la robustesse a été désactivée lors de la génération.

Des commentaires ?

Merci.

0

Cujo

Client, bbp_participant, communauté, 97 réponses.

Visiter le profil

il y a 10 ans #137162

Je pense qu'entre 100 et 1000 tests, il y a peu de différence, ils se ressemblent. 

 

Pour l'instant, j'effectue 550 tests juste parce que (sur la base de certaines des lectures que j'ai mises en évidence dans l'OP).

 

En regardant votre étude, je pense que je devrais passer à 100.

0

Tomas Matejka

Administrateur, sq-ultimate, 2 réponses.

Visiter le profil

il y a 10 ans #137169

Tous les tests précédents ont été effectués sur Dukas Copy M15 avec une résolution M1

Il est maintenant temps d'utiliser des données en temps réel

En effectuant des tests 100x, tous ont réussi ! mais la stratégie originale a échoué lamentablement.

 

Cela semble étrange. Nous allons vérifier s'il y a un problème éventuel.

Pourriez-vous également joindre la stratégie USDJPY 15 min 14.40 ?

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137174

Je pense qu'entre 100 et 1000 tests, il y a peu de différence, ils se ressemblent. En ce moment, j'effectue 550 tests juste parce que (sur la base de certaines des lectures que j'ai mises en évidence dans l'OP).

En regardant votre étude, je pense que je devrais passer à 100.

C'est exact, en regardant ces 1000 tests, allez-vous désélectionner la stratégie juste parce que l'UNE d'entre elles va un peu vers le sud pendant 40 trades, et bien cela signifie simplement que la stratégie a 0,1% de chances de se dérouler de cette manière. En réalité, c'est moins, car j'ai fixé des conditions très strictes.

 

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137175

Cela semble étrange. Nous allons vérifier s'il y a un problème possible. Pourriez-vous également joindre la stratégie USDJPY 15 min 14.40 ?

Merci Tomas,

Je ne peux pas reproduire les mêmes résultats, rien n'a changé, les mêmes données, les mêmes paramètres.

Je pense que j'ai utilisé le même PC, mais il était tard et j'ai pu faire une erreur. Aujourd'hui tout fonctionne comme prévu.

Mais sur la capture d'écran, vous pouvez voir que tout est identique, les dates, les paires.

Exécution de 100 tests sur la même stratégie.

Ceci est testé avec les tests M1 de résolution 100.

 

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137178

Désolé, j'aurais dû prendre un meilleur système de trading, mais ce n'était pas le sujet, je voulais voir comment le MC affecte, et c'était ODD que certains systèmes de trading aient un meilleur RT que Equity Curve, c'était très étrange en effet.

La courbe d'Euity n'a donc pas d'importance, mais si vous voulez la voir, ce n'est pas une très bonne stratégie,

Je ne suis pas sûr de ce qui s'est passé hier, je pense que je l'ai testé sur le serveur Windows 2012 et cette fois je le teste sur Windows 2008, laissez-moi tester sur la même plateforme et nous saurons ainsi ce qui s'est passé.

 

0

Affichage de 15 réponses de 16 à 30 (sur un total de 31)

← 1 2 3 →