Resultados da pesquisa para 'gpu'

[Jason]

Tenho testado StrategyQuant com a M1 recentemente usando o modelo básico M1 Macbook Air com 8GB de RAM vs meu iMac i5 quad core com 32GB de RAM. Parece ser 2,5 a 3 vezes mais rápido que meu iMac embora eu possa ver no monitor de atividade o status do processo StrategyQuant ainda está listado com uma arquitetura Intel, então eu assumo que ele ainda não foi otimizado para o M1.

Eu também pensaria que isto está passando pela Rosetta, o que definitivamente não é o melhor. Vi outro posto solicitando o uso dos núcleos adicionais da GPU M1s e do Motor Neural.

Portanto, parece que há definitivamente espaço para mais melhorias.

Quanto à estabilidade, a última versão do Mac (B131) não é muito estável nem no novo M1 ou no Mac Intel infelizmente não tanto com o lado de processamento das coisas, mas com a GUI ou assim parece a partir do meu uso e testes. Relatórios foram arquivados por mim e outros, então tenho certeza de que a equipe de desenvolvimento está procurando resolver os problemas.

[Waid]

Oi Hankeys,

Obrigado por sua recomendação.

Talvez eu compre uma AMD R9 5950x + mini-ITX.

A propósito, o SQX exige GPU?

[ivan]

AMD anuncia datas de lançamento para CPUs Zen 3 e placas de vídeo RDNA 2 "Big Navi

https://www.notebookcheck.net/AMD-announces-launch-dates-for-Zen-3-CPUs-and-RDNA-2-Big-Navi-graphics-cards.492671.0.html

O Zen 3 será lançado oficialmente em 8 de outubro e o RDNA 2 (com GPUs da série Radeon RX 6000) será lançado em 28 de outubro.

Timisoara, Romênia
3900X 3,8 Ghz 12 núcleos, 64GB RAM DDR4 3000Mhz, Samsung 970 EVO Plus M.2 NVMe

[Insanidade82007]

Recentemente, comprei um sistema Ryzen 3900x com 32 GB de RAM para gerar estratégias. É uma ótima configuração e consigo fazer muita coisa com ela! 🙂

Pesquisei bastante e tive alguns problemas com a configuração de tudo, então pensei em compartilhar minhas experiências com aqueles que pretendem criar uma configuração semelhante para o SQX.

Inicialmente, porém, tive problemas com altas temperaturas de carga e queria compartilhar algumas informações com aqueles que estão pensando em usar as CPUs Ryzen de última geração para criar estratégias SQX.

Pesquisei bastante antes de comprar o equipamento e me concentrei especialmente em manter a temperatura da CPU baixa. Analisei muitas análises de gabinetes e de resfriamento a água AIO.

No final, continuei com meu velho e confiável gabinete Silverstone Raven 2 e decidi optar pelo resfriamento a ar. Embora meu Raven 2 tenha cerca de 10 anos de idade, em muitas análises ele foi, de longe, o gabinete mais legal ainda no mercado porque a Silverstone é a ÚNICA fabricante de gabinetes no mercado que orienta a placa-mãe em 90 graus. Isso significa que os plugues da placa-mãe, da placa de vídeo e da placa de som ficam na parte superior do gabinete, e não na lateral, como de costume.

O gabinete vem com 3 ventoinhas de resfriamento muito grandes na parte inferior do gabinete e empurra o ar para fora da parte superior, usando um efeito do tipo chaminé, e funciona muito melhor do que a maioria dos outros designs de gabinete, pois aproveita ao máximo o conceito de termodinâmica e empurra todo o calor crescente diretamente para fora da parte superior do gabinete, em vez de ter problemas como a cabeça da GPU subindo para a ventoinha de resfriamento da CPU. Grande vitória.

Se eu tivesse optado por um gabinete mais moderno, teria tido temperaturas até 10C mais altas, o que teria anulado o ganho de 5C a 10C que eu teria obtido com o uso de um AIO, o que foi um gasto desnecessário.

No final, optei pelo Noctua NH-D15, que é um resfriador a ar gigantesco e tem sido a solução de resfriamento a ar mais fria do mercado há algum tempo. Não só a CPU se beneficia muito com esse grande cooler, mas os VRMs e a RAM também recebem um bom ar frio.

Mesmo com tudo isso (ou se eu tivesse optado pelo AIO), ainda tive problemas de resfriamento. Quando configurei tudo pela primeira vez, minhas temperaturas de carga ainda estavam entre 68C e 75C, o que me incomodou bastante, mesmo que isso esteja supostamente dentro das especificações.

Fiz algumas pesquisas e descobri que, por algum motivo, como essas CPUs e as placas-mãe X570 / B550 / X470 ainda são tecnologias relativamente novas e têm muito a amadurecer, os fabricantes de placas-mãe geralmente sobrecarregam a CPU.

Pesquisei um pouco mais e acabei encontrando esses dois vídeos, que me ajudaram MUITO:

https://www.youtube.com/watch?v=Ssuqhyqah2k

https://www.youtube.com/watch?v=2wM3obN2pAE

Agora, configurei minha CPU para 3,9 Ghz para todos os núcleos / threads e a voltagem da CPU para 1,125v usando o Ryzen Master e minhas temperaturas de carga nunca passam de 50C e estou MUITO mais feliz com isso e ainda estou gerando estratégias sobre o 95% tão rápido quanto antes, mas com configurações muito mais seguras!

[Stormin_Norman]

Olá, pessoal!

Meu uso da CPU costumava ficar em 100% constante no SQ até 126. A configuração é usar todos os núcleos, exceto 1 para a GPU.

Com 127, é assim:

 

Isso está funcionando corretamente?

OBRIGADO

"Ser ou não ser? Esse é o qu3stinn". - Macaco na máquina de escrever

[gusyoan]

Tenho um Xeon duplo de 64 threads e um DIMM LR de 128G em minha estação de trabalho, só espero obter uma maneira mais eficiente para melhorar. Verifiquei as postagens anteriores e parece que a GPU não funciona 🙁.

[gusyoan]

Olá, Mark,

Além da GPU, é possível usar uma placa FPGA ou ASIC?

[ivan]

Mark Fric tinha um cargo, alguns anos atrás quando explicou ao nível mais básico que as regras em algotrading e as regras nas quais uma estratégia se baseia, "e se" simplesmente não é compatível com a forma como a arquitetura GPU é projetada. Ou algo semelhante, eu não consigo encontrar o posto e só me lembro de peças desse posto. Em qualquer caso, pelo menos para mim e para muitos outros, foi convincente o suficiente.

Outro argumento, mas baseado em deduções lógicas: hoje, existem vários outros softwares similares ao SQX, mas todos projetados para serem executados em CPU. Se um software funcional em GPU era possível, muito provavelmente já era funcional e público até agora. Se tal software não existe, isto em si é uma afirmação.

Com relação ao desempenho real do SXQ em diferentes processadores, é um assunto relacionado, mas diferente. Eu comecei o tópico sobre configurações de PCs e benchmarks para exatamente esse propósito, para que todos nós tivéssemos uma visão técnica e exata da situação. Em teoria, 2 coisas devem acontecer se você executar o software em 2 processadores diferentes. Ou a mesma estratégia é criada mais rapidamente, em poucos dias ao invés de semanas, ou na mesma unidade de tempo, você obtém uma estratégia mais complexa (e por dedução, uma estratégia mais lucrativa).

Timisoara, Romênia
3900X 3,8 Ghz 12 núcleos, 64GB RAM DDR4 3000Mhz, Samsung 970 EVO Plus M.2 NVMe

[Gianfranco]

em um antigo posto meu eu expressei se era possível usar núcleos de cuda gpu (nvidia) para computação paralela
e eles disseram que isso não é possível ....
Assim, para aqueles que têm dinheiro para gastar ... xeon platina, ouro (dois) e TR amd EPYC mas muito poder sem saber o que fazer ... é inútil ... quero dizer que muitos se concentram apenas no poder computacional. ... espero extrair super estratégias ... Conheço algotraders que trabalham com computadores de nível médio e 'fazem estratégias de trabalho ... Acho que correr afinal de contas a última CPU é de pouca utilidade

é apenas minha observação

Mudei o computador 3 vezes, sempre mais rápido, as estratégias não melhoraram com a velocidade do computador

[ivan]

sobre o uso de GPU no SQ, você pode ler aqui um post recente do administrador

https://strategyquant.com/forum/topic/parallel-processing-for-genetic-training-and-generation/#post-247279

O administrador, Mark Fric, também explicou em posts mais antigos estes princípios, como neste

https://strategyquant.com/forum/topic/1774-what-type-of-computer-specifications-do-you-all-have/page/2/#post-126669

Em relação ao Xeon e ao desempenho, no presente, os últimos AMD Ryzen 9 e Threadrippers estão entre os melhores que a tecnologia mundial tem atualmente.

Timisoara, Romênia
3900X 3,8 Ghz 12 núcleos, 64GB RAM DDR4 3000Mhz, Samsung 970 EVO Plus M.2 NVMe

[gusyoan]

Parece que Xeon não pode atender às necessidades profissionais o suficiente, a equipe SQ planeja adicionar mais funcionalidades como GPU? até mesmo um roteiro de evolução como Bitcoin minerador será melhor, CPU-GPU-FPGA-ASIC.

[kainc301]

Mark Fric escreveu:

Consultei isso repetidamente com meus amigos PHD da universidade que trabalham com GPUs e, infelizmente, o status não mudou - as GPUs não são adequadas para nós. É possível executar a evolução genética e também "algum tipo" de backtesting na GPU. O problema é a natureza aberta da SQ que queremos alcançar. Poderíamos criar uma arquitetura de estratégia fixa e um conjunto fixo de indicadores que seriam testados na GPU, mas então não poderíamos usar coisas como modelos de estratégia, programação de indicadores personalizados e outros blocos, que são todos pontos fortes do SQ X. Essa aceleração de cem vezes que eles mencionam nos artigos só é possível sob certas condições e com certos programas, ainda não é possível acelerar o processo geral de backtesting dessa forma.

Isso é lamentável. Concordo que é muito mais importante manter a flexibilidade no uso de indicadores/modelos personalizados do que sacrificá-la em prol do desempenho.

Portanto, a verdadeira solução para buscar maior desempenho por meio de hardware é usar várias CPUs conectadas por meio de um sistema de grade. Pelo menos posso economizar dinheiro em GPUs caras, haha.

[Marca Fric]

Consultei isso várias vezes com meus amigos PHD da universidade que trabalham com GPUs e, infelizmente, o status não mudou - as GPUs não são adequadas para nós.

É possível executar a evolução genética e também "algum tipo" de backtesting na GPU. O problema é a natureza aberta do SQ que queremos alcançar.

Poderíamos criar uma arquitetura de estratégia fixa e um conjunto fixo de indicadores que seriam testados em GPU, mas não poderíamos usar coisas como modelos de estratégia, programação de indicadores personalizados e outros blocos, que são pontos fortes do SQ X.

Essa aceleração de cem vezes mencionada nos artigos só é possível em determinadas condições e com determinados programas; ainda não é possível acelerar o processo geral de backtesting dessa forma.

Marcar
EstratégiaQuant arquiteto

[kainc301]

Fiz muitas pesquisas nos fóruns da SQ e em outros lugares para entender os gargalos atuais da computação de GPU quando se trata de backtesting. Quando Mark falou sobre isso no passado, o problema tinha a ver com o uso de GPUs para computação de uso geral, pois o backtesting era mais complexo do que as operações matemáticas. Um sentimento semelhante foi descrito neste resumo acadêmico aqui: https://pdfs.semanticscholar.org/d087/f5cb4a92f98aaef5008ceb682954f7ffbee2.pdf

No entanto, parece que dois pesquisadores conseguiram usar GPUs de forma eficaz com algoritmos genéticos nos mercados de câmbio. Recomendo fortemente a análise e a possível implementação dessa abordagem. O link completo para a pesquisa acadêmica está aqui: http://people.scs.carleton.ca/~dmckenne/5704/Paper/Final_Paper.pdf

Também descobri que a NVIDIA conseguiu usar GPUs para backtesting do mercado financeiro e alcançar um aumento de velocidade de 6000 vezes. https://www.nvidia.com/content/dam/en-zz/Solutions/industries/finance/finance-trading-executive-briefing-hr-web.pdf

Não sei como eles fizeram isso, por isso vou continuar procurando, mas parece haver uma maneira de incorporar a lógica CUDA que é capaz de fazer o tipo de backtesting que antes era considerado quase impossível de ser feito. Portanto, acredito que ainda há esperança de que isso seja implementado na SQX um dia. Se isso já foi feito antes, não o considero "impossível". Os pesquisadores que incorporaram GPUs em seu algoritmo genético também usaram CUDA para obter seus resultados.