LECTURE SEULEMENT

Le forum est désormais une archive en lecture seule.

Pour les rapports de bogues et les questions relatives à la plateforme → [email protected]

Notre communauté vit sur Discord et YouTube - rejoignez-nous !

JOIGNEZ-NOUS SUR Discord YouTube

Jusqu'à quel point la robustesse est-elle suffisante ?

31 réponses

Cujo

Client, bbp_participant, communauté, 97 réponses.

Visiter le profil

il y a 10 ans #115074

Quels paramètres utilisez-vous pour les tests de robustesse de Monte Carlo ? Je comprends que l'on ne peut jamais être trop prudent, qu'il s'agit d'argent et qu'il faut être certain, donc je ne veux pas trop réduire les tests de robustesse, mais...

 

J'ai commencé par l'image du haut. Toutes les stratégies testées n'ont pas seulement échoué, mais ont été très, très, très mauvaises. Cela m'a fait penser que mes paramètres (image du haut) sont peut-être trop sévères. Cela transformerait des stratégies modérément réussies, utilisant les mêmes données IS pour le Monte Carlo, non pas en une simple destruction de compte, mais en une oblitération totale.

 

En additionnant tout cela, par exemple, il y a 60% de chances que quelque chose se produise, comme 20% de changement de paramètre, ou 20% de changement de prix, etc... logiquement, cela semble très lourd.

 

Où j'ai commencé

6jtN7Fe.png

 

J'ai fait quelques expériences, en pensant d'abord que si je prenais un tas de stratégies, sur le même SI, que je les soumettais à la simulation de Monte Carlo, et que je la modifiais pour que le bénéfice net le plus robuste soit de ~10% de part et d'autre, c'était peut-être à peu près juste. Mais j'ai eu l'impression d'optimiser un peu trop le risque en recherchant un résultat spécifique avec mes paramètres de robustesse, ce qui ne me semblait pas correct (et qui était de toute façon très difficile).

 

Puis j'ai pensé - je sais, je vais juste tout diviser par deux, ce qui laisse toujours une possibilité de 30% que quelque chose se passe, comme un échange est sauté ou un changement de paramètre, etc... ce qui m'a laissé avec ce qui suit....

 

Où j'en suis

E7kT8xy.png

 

 

Puis j'ai commencé à douter de ce que je faisais, et j'ai donc décidé de demander conseil. Quels paramètres utilisez-vous pour tester la robustesse de la simulation de Monte Carlo ? Peut-être que l'image 2 est trop lourde ?

 

 

Nombre de simulations de Monte Carlo à effectuer

Cela m'a fait réfléchir sur le nombre de simulations à effectuer :

  • 5000 c'est un peu suffisant, 7500 c'est mieux et 10 000 c'est trop. une étude qui a étudié les études sur les simulations de Monte Carlo.
  • 500-1000 est suffisant si vous testez des armes, mais les résultats se stabilisent après ~500. Je suppose que la différence entre 98% mortes et 95% mortes n'a pas d'importance.
  • Au moins 440 foissi vous utilisez un logiciel d'analyse de risque professionnel dédié (note : analyseur de risque professionnel et non trader professionnel).
  • D'après de nombreuses lectures, le nombre de fois qu'il faut l'exécuter dépend de l'écart-type des données sur lesquelles on l'exécute.

En ce qui concerne le nombre de fois où il faut l'exécuter pour évaluer le système de négociation, le courtier ambi conseille 1000 (ici et ici), Vanguard do 5000 est la recommandation la plus basse que j'ai trouvée. 500Mais le meilleur conseil semble être de l'échelonner autour de 4000, en fonction du nombre de paramètres de votre système... combien en utilisez-vous ?

 

J'ai changé mon niveau de confiance de 95% à 98%, ce qui m'a permis de me sentir plus confiant, mais je me demande toujours quels paramètres utiliser... ??

0

mabi

Client, bbp_participant, communauté, sq-ultimate, 252 réponses.

Visiter le profil

il y a 10 ans #136717

Nous utilisons simplement les tests de robustesse pour voir si la stratégie générée est adaptée au bruit du marché. Si c'est le cas, vous n'aurez même pas besoin de 500 exécutions puisqu'elle montrera immédiatement si elle est adaptée aux baisses des courbes des actions... En tout cas, c'est ce que je comprends des tests de robustesse.

 

 

Cependant, plus le cadre temporel est bas, plus il y a de bruit et de risque pour une stratégie adaptée à la courbe...

0

mabi

Client, bbp_participant, communauté, sq-ultimate, 252 réponses.

Visiter le profil

il y a 10 ans #136718

En résumé, le test d'ajustement de la courbe " Robustesse " n'est qu'un moyen rapide d'éliminer les mauvaises stratégies. Le véritable test est le test "walkforward". S'il n'est pas satisfaisant, la stratégie doit être supprimée ou améliorée.

0

Cujo

Client, bbp_participant, communauté, 97 réponses.

Visiter le profil

il y a 10 ans #136722

En résumé, le test d'ajustement de la courbe " Robustesse " n'est qu'un moyen rapide d'éliminer les mauvaises stratégies. Le véritable test est le test "walkforward". S'il n'est pas satisfaisant, la stratégie doit être supprimée ou améliorée.

 

Les objectifs sont différents, bien sûr. Monte Carlo concerne davantage le risque, la confiance dans les résultats et le test de robustesse par le biais du bruit, de la randomisation, etc.

 

La marche en avant consiste davantage à déterminer si les paramètres doivent être optimisés (mais pas en quoi consiste l'optimisation), puis à effectuer des tests sur les OOS (ce qui permet de tester la robustesse).

 

Voici une série d'articles intéressants sur les 2, ici et ici (pas nécessairement les différences, mais system trader est un bon site web, je suppose que la plupart des gens ici le connaissent).

 

Mais, en mettant de côté les différences entre Walk forward et Monte Carlos Simulation, en se concentrant sur la Monte Carlo Simulation... quels paramètres utilisez-vous dans Monte Carlo par rapport aux images dans l'OP ? On dirait que vous avez beaucoup de conseils à donner... 🙂 .

0

mabi

Client, bbp_participant, communauté, sq-ultimate, 252 réponses.

Visiter le profil

il y a 10 ans #136727

Merci ! D'accord, j'ai en fait les outils gratuits de Kevin Davey et son livre. Je suppose que je dois le relire ! ( Il m'a dit cela il y a 2 semaines ) Cependant, lorsque nous construisons une stratégie, nous recherchons le vrai signal sans adapter la stratégie au bruit du marché et c'est pour cela que nous utilisons Montecarlo. Si nous avons trop d'indicateurs, la stratégie sera certainement adaptée, c'est pourquoi je ne cherche que des indicateurs très simples. L'une des méthodes que j'ai trouvée pour y parvenir avec SQ consiste à générer uniquement des données sur 1 à 4 ans et à laisser 15 ans hors de l'échantillon. Je constate alors que les seuls indicateurs qui présentent une courbe d'équilibre sont très simples et robustes.

 

 

(Je ne connais pas Kevin Davey mais il fréquente un autre forum où il est très actif)

 

 https://futures.io/vendors-product-reviews/26335-kj-trading-systems-kevin-davey-ask-me-anything-ask-me-anything.html

 https://www.youtube.com/watch?v=kBW7-p2DMVU

0

paix à l'est

Client, bbp_participant, communauté, sq-ultimate, 298 réponses.

Visiter le profil

il y a 10 ans #136763

500 simulations permettraient à SQ de s'arrêter. (831 stratégies dans le pool de test)

 

i7-4790, 16G ram.

0

geektrader

Client, bbp_participant, communauté, 503 réponses.

Visiter le profil

il y a 10 ans #136858

Non, ce n'est pas le cas, j'utilise toujours 1000, même pour plusieurs stratégies à la fois dans le Re-Tester. Il ne retient rien ici, il n'utilise pas beaucoup de RAM non plus, il prend juste beaucoup de temps :) Mais SQ n'a jamais bloqué, cela a juste pris plusieurs jours parfois ;)


🚀 Déverrouillez votre avantage dans le développement de stratégies automatisées pour le Forex 🚀

Données historiques du Forex depuis 1987, 28 paires, M1, 99% sans erreur, mises à jour gratuites à vie

0

mabi

Client, bbp_participant, communauté, sq-ultimate, 252 réponses.

Visiter le profil

il y a 10 ans #136859

1000 tests signifie simplement que 950 des 1000 tests doivent se situer dans la fourchette d'écart acceptable. Je trouve qu'il est parfois difficile de déterminer quels tests et quelle ampleur de changement appliquer pour avoir un impact raisonnable sur les performances des stratégies sans les détruire totalement en fonction de leur complexité. Cela soulève une autre question, à savoir comment configurer SQ pour trouver un certain type de stratégies afin de savoir que les paramètres appliqués au test Monecarlo ont l'effet désiré. Il suffit de tout choisir dans le builder et de le laisser fonctionner pour produire un large éventail de stratégies différentes qui ne peuvent pas être testées avec les mêmes paramètres et doivent être séparées avant d'être testées. Ou est-ce que je me trompe ?

0

Cujo

Client, bbp_participant, communauté, 97 réponses.

Visiter le profil

il y a 10 ans #136919

Je réfléchissais à la robustesse et j'ai réécouté une Kevin Davey podcast de Système Trader SuccessJe suppose que tout le monde ici les connaît tous les deux, bien sûr 🙂 .

 

Il a mentionné qu'il avait effectué 5000 simulations de Monte Carlo. J'en fais plutôt 50, parfois 550, juste après la génération, dans le cadre du processus d'élimination. Je pense que je ne m'approche de ce nombre que pour les stratégies qui ont passé quelques tests de robustesse de base et une marche en avant, et qui m'intéressent de plus en plus. Ce n'est certainement pas le cas lorsque j'élimine des stratégies de la banque de données par milliers...

 

 

[media]https://www.youtube.com/watch?v=TpmDzRFIu0k[/media]

 

 

0

Cujo

Client, bbp_participant, communauté, 97 réponses.

Visiter le profil

il y a 10 ans #136920

Merci ! D'accord, j'ai en fait les outils gratuits de Kevin Davey et son livre. Je suppose que je dois le relire ! ( Il m'a dit cela il y a 2 semaines ) Cependant, lorsque nous construisons une stratégie, nous recherchons le vrai signal sans adapter la stratégie au bruit du marché et c'est pour cela que nous utilisons Montecarlo. Si nous avons trop d'indicateurs, la stratégie sera certainement adaptée, c'est pourquoi je ne cherche que des indicateurs très simples. L'une des méthodes que j'ai trouvée pour y parvenir avec SQ consiste à générer uniquement des données sur 1 à 4 ans et à laisser 15 ans hors de l'échantillon. Je constate alors que les seuls indicateurs qui présentent une courbe d'équilibre sont très simples et robustes.

 

 

(Je ne connais pas Kevin Davey mais il fréquente un autre forum où il est très actif)

 

 https://futures.io/vendors-product-reviews/26335-kj-trading-systems-kevin-davey-ask-me-anything-ask-me-anything.html

 https://www.youtube.com/watch?v=kBW7-p2DMVU

 

OUI, Kevin est vraiment un bon modèle. J'ai lu et relu son livre à plusieurs reprises. Il est très actif sur les forums et ...bien, un bon modèle, il enseigne beaucoup 🙂 Je ne le connais pas non plus, mais il est très accessible. Je suppose qu'il a vendu beaucoup, beaucoup de ses livres aussi.

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137119

Quelle est la fiabilité du test robuste ?

La stratégie originale échoue, mais le test robuste donne de très bons résultats.

Voir l'instantané de la configuration.

 

http://s33.postimg.org/9gc31fw5r/Robust_test_failure_settings.png

Quelqu'un peut-il faire un commentaire ?

Merci.

0

mabi

Client, bbp_participant, communauté, sq-ultimate, 252 réponses.

Visiter le profil

il y a 10 ans #137120

@ Statistique,

 

Le test de robustesse tente de simuler différentes conditions de marché en modifiant les données. Il semblerait que votre stratégie soit plus performante dans d'autres conditions de marché que dans celle sur laquelle vous l'avez créée.

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137121

@ Statistic,Le test de robustesse tente de simuler différentes conditions sur le marché en modifiant ses données. Il semblerait que votre stratégie soit plus performante dans d'autres conditions de marché que dans celle sur laquelle vous l'avez créée.

Merci @Mabi, pour la réponse rapide à la fusée. J'ai généré une série de stratégies et elles fonctionnent dans les conditions OTHER mieux que sur les données originales.

Je n'avais jamais vu cela avant de passer aux données de Dukas Copy.

La stratégie est générée sur M15, Tradez sur la barre d'ouverture rapide, mais lorsque le Retest utilise le Tick réel.

La façon dont cela se passe n'a pas beaucoup de sens.

J'utilisais habituellement les données commerciales M1, et j'ai revu manuellement plus d'un million de stratégies, mais je n'ai jamais vu une telle divergence avant de passer aux données Dukas Copy Tick.

Est-ce que cela se produit avec les données de Dukas Copy tick ?

Nous vous remercions.

 

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137125

500 simulations permettraient à SQ de s'arrêter. (831 stratégies dans le pool de test)i7-4790, 16G ram.

Bonjour, je viens de faire 1000 tests sur 100 stratégies, j'ai obtenu un CPU 35%, voir la capture d'écran.

Cela n'a donc rien à voir avec votre SQ, vous devez simplement utiliser des Severs plus performants.

Paramètres :

 

 

0

Cujo

Client, bbp_participant, communauté, 97 réponses.

Visiter le profil

il y a 10 ans #137126

Je n'ai également aucune difficulté à effectuer 1 000 ou 5 000 simulations Monte Carlo sur les stratégies. 

0

statistique

Abonné, bbp_participant, communauté, 31 réponses.

Visiter le profil

il y a 10 ans #137127

Je n'ai également aucune difficulté à effectuer 1 000 ou 5 000 simulations Monte Carlo sur les stratégies.

Il suffit d'effectuer 1000 tests sur 100 stratégies, ce qui prend beaucoup de temps, plus de 30 minutes ! Mais ce n'est pas grave, pour le plaisir de tester.

il est préférable d'écarter d'abord les stratégies qui échouent sur les tests 20/100/300.
Ainsi, il n'est pas nécessaire d'exécuter toutes les stratégies d'échec groupé pendant 5 minutes chacune.

 

0

Affichage de 15 réponses de 1 à 15 (sur un total de 31)

1 2 3 →