Testes de robustez para quê?
5 respostas
Csaba
7 anos atrás #245556
Olá, amigos!
Fiz um experimento interessante.
Eu tinha 120 estratégias que pareciam ser muito boas desde 2004.01.01. - 2017.01.01.
A partir dessas 120 estratégias:
- 20 foram legais entre 2017.01.01. - 2019.01.01. também
- 100 foram reprovados. A curva do patrimônio líquido caiu.
O que eu gostaria de saber é: como os testes de robustez são feitos com as 20 estratégias boas e as 100 ruins? (Para mim, o MERCADO DIFERENTE e a RANDOMIZAÇÃO DE PARÂMETROS são os mais importantes. Fiz agora apenas esses dois testes).
O resultado é muito interessante!
Eu descobri isso:
- Nenhuma das 20 boas estratégias passou nos diferentes parâmetros do mercado e do rand.
- 6 das 100 estratégias ruins foram aprovadas nos parâmetros do mercado de diferenças e do rand.
Portanto, eu teria adotado apenas estratégias perdedoras se decidisse com base nos testes de solidez.
Pergunta: ROBUSTENSS TEST para quê?
0
mabi
7 anos atrás #245565
Acredito que o uso de testes de robustez serve apenas para classificar as estratégias com base em seu pior desempenho histórico, esperando que o resultado futuro não seja pior do que isso. Ele não pode, de forma alguma, dizer qual é o desempenho esperado para o próximo ano, ele só pode simular o que pode ser o pior ou o melhor caso, e isso é a longo prazo e a curto prazo. Portanto, se o saque máximo simulado for 100%, você poderá esperar um saque de 100% na pior das hipóteses quando começar a negociá-lo imediatamente :). Portanto, para combater isso, é preciso criar um portfólio diversificado.
0
Marcel
7 anos atrás #245581
Olá, amigos! Fiz um experimento interessante. Eu tinha 120 estratégias que pareciam ser muito boas desde 2004/01/01. - 2017.01.01. Dessas 120 estratégias: - 20 foram boas entre 2017.01.01. - 2019.01.01. também - 100 falharam. A curva do patrimônio líquido caiu. O que eu gostaria de saber é: como os testes de robustez são feitos com as 20 estratégias boas e as 100 ruins? (Para mim, o MERCADO DIFERENTE e a RANDOMIZAÇÃO DE PARÂMETROS são os mais importantes. Fiz agora apenas esses dois testes). O resultado é muito interessante! Descobri que: - nenhuma das 20 estratégias boas passou nos parâmetros diff. market e rand. - 6 das 100 estratégias ruins passaram nos parâmetros diff. market e rand. Portanto, eu teria escolhido apenas as estratégias perdedoras se decidisse com base nos testes de robustez. Pergunta: ROBUSTENSS TEST para quê?
Aqui seria interessante saber que tipo de testes de robustez você quer dizer ou fez.
Se você presumir que os testes de robustez são possivelmente desnecessários, também terá que nos dizer de que tipo de teste está falando.
0
Tomas Matejka
7 anos atrás #245584
Se o teste de solidez tiver um impacto negativo no desempenho da estratégia, isso não significa necessariamente que a estratégia é ruim e deve ser descartada imediatamente.
A lógica por trás do que faz a estratégia funcionar faz sentido? Se sim, e se a estratégia continuar funcionando depois de muitos anos de dados de backtest, você pode considerar mantê-la. Mas isso também depende de qual dos testes de RT falhou, se foi o teste de derrapagem, o teste de alteração de parâmetros, apenas a modificação da ordem de negociação etc. Portanto, você precisa investigar o que causou a falha no teste RT da estratégia e qual é a probabilidade de o pior cenário mostrado pelo teste de robustez se concretizar na negociação real
0
Csaba
7 anos atrás #245587
Olá a todos!
Obrigado a todos pelas respostas. Você perguntou que tipo de RT eu fiz/significa. Escrevi em minha postagem: "Para mim, o MERCADO DIFERENTE e a RANDOMIZAÇÃO DE PARÂMETROS são os mais importantes. Fiz agora apenas esses 2 testes."
É claro que também faço testes de derrapagem, de ordens aleatórias, etc., mas os dois testes mencionados acima são realmente importantes para mim. E, para esse pequeno experimento, fiz apenas parâmetros diferentes de mercado e rand. Para mim, esses dois testes são os mais importantes.
E para você?
0
Marcel
7 anos atrás #245588
Para mim, esses são os testes mais importantes:
1. Deslizamento
2. Período de tempo diferente
3. Mercado diferente
0
Visualizando 5 respostas - 1 até 5 (de um total de 5)