Aggiornamenti SQ X

Qui è possibile discutere gli aggiornamenti e le novità di SQ X.

Questo argomento è stato rinominato da SQ4 Early preview. I vecchi post non più rilevanti sono o saranno cancellati e archiviati.

Il punto è ripulire il nostro forum da cose vecchie e non pertinenti.

mabi ha scritto:

notch ha scritto:

Attualmente mi sto liberando dalla dipendenza da SQ3. SQ4 è davvero un kit potente, sono sopraffatto!!! Grazie SQDEVT!!!

+1

Ragazzi, sembra che voi vi stiate godendo il frutto del lavoro di Mark - e io no! La mia evoluzione genetica ha funzionato 48+ e non ha generato uno strat!!!

Prima di questo ho importato alcuni strats precedentemente generati casualmente in Initial population. Neanche questo ha funzionato!

Ciao Mark,

SR106 sembra davvero bello. Non è esente da errori, ma la direzione del software è quella giusta. Se si procede in questo modo si può cambiare il mondo.

Tommaso

Grazie, sono contento che la nuova versione vi piaccia. Stiamo lavorando duramente per renderla la migliore 🙂

Jojo ha scritto:

La mia evoluzione genetica ha funzionato per più di 48 ore e non ha generato nemmeno uno strat!!! Prima di questo ho importato alcune strategie precedentemente generate casualmente nella popolazione iniziale. Neanche questo ha funzionato!

Se non si vedono strategie entro 30 minuti - 1 ora, c'è qualcosa che non va. Provate a passare alla generazione casuale. Se nessuna strategia supera i filtri, potrebbe significare che i filtri sono troppo rigidi o non sono configurati correttamente.

Marchio

So che questo argomento è già stato affrontato in passato, ma sento di volerlo ripetere. L'idea che la strategia quant sia in grado di girare su una GPU è probabilmente il più grande guadagno possibile per noi. I processori nvidia P100 e V100 sono letteralmente centinaia di volte più veloci di quelli che stiamo utilizzando.

Ho appena passato un po' di tempo a cercare l'elaborazione su cloud di Google e se questo fosse possibile potremmo tutti eseguire l'elaborazione in batch per alcune ore a un costo di circa $8 all'ora. Questo sarebbe uno sviluppo ENORME!!!!

Cosa ne pensate?

jmtc1230 ha scritto:

Mark So che questo argomento è già stato sollevato in precedenza, ma sento di volerlo ripetere. L'idea che la strategia quant sia in grado di funzionare su una GPU è probabilmente il più grande guadagno possibile. I processori nvidia P100 e V100 sono letteralmente centinaia di volte più veloci di quelli che stiamo utilizzando. Ho appena trascorso un po' di tempo a esaminare l'elaborazione su cloud di Google e se questo fosse possibile potremmo tutti eseguire elaborazioni batch per alcune ore a un costo di circa $8 all'ora. Sarebbe uno sviluppo ENORME!!!! Cosa ne pensate?

Ciao jmtc1230, Cosa intendi con "potremmo tutti" eseguire l'elaborazione batch su $8. Significa che condividiamo i costi mettendo insieme le nostre strategie ai fini dell'elaborazione, oppure che abbiamo accessi diversi, mantenendo le nostre strategie separate? Immagino che alcuni di noi abbiano molto più di altri da elaborare - come potremmo determinare l'accesso/l'uso/il costo proporzionale? Sembra una buona idea - se solo riuscissi a capirla meglio.

Mark, il costo dell'ambiente cloud di Google si aggira tra $5 e $10 all'ora, a seconda della macchina virtuale e delle opzioni selezionate. Quello che intendo fare è acquistare l'uso di questo spazio per un blocco di tempo, ad esempio 10 ore, che costerà circa $80 o giù di lì. In questo lasso di tempo posso svolgere una quantità di lavoro da 200 a 500 volte superiore rispetto al mio computer personale. Pagherò volentieri $80 per avere la possibilità di svolgere tanto lavoro in determinati momenti.

Josh

L'ho già detto alcune volte, il tipo di motore di trading "reale" implementato nel nuovo SQ4 non è adatto al calcolo tramite GPU.

Ma stiamo progettando di realizzare un motore di backtesting più semplice che possa essere eseguito su GPU, principalmente per l'addestramento delle reti neurali o per backtest molto dettagliati che utilizzino la precisione dei timeframe selezionati. Si tratta quindi di un progetto a medio o lungo termine, ma l'architettura esatta non è ancora stata progettata.

Ci sono caratteristiche più importanti che dobbiamo completare al più presto.

Ora è un po' più chiaro. Quindi non è uno sforzo collettivo quello di cui parli. Giusto Josh?

Se controllate i prezzi, scoprirete che affittare energia da Amazon/Google ecc. è molto più costoso che acquistare il proprio hardware o persino il proprio server dedicato.

Quindi non c'è molto valore nel farlo.

Per quanto riguarda lo sforzo collettivo, è una buona idea, ma difficile da implementare e gestire. È qualcosa che vorremmo fornire noi stessi nel prossimo futuro, quando la griglia sarà terminata: avremo più server e potremo affittare l'energia per periodi di tempo più brevi, in modo da poter accelerare alcune cose.
Ma anche in questo caso è molto più difficile da realizzare di quanto sembri.

JoJo, potrebbe essere, ma non è necessario che sia collettivo. Si tratta semplicemente di noleggiare una macchina virtuale da Google con un massimo di 96 core e una GPU Tesla P 100 per poter sviluppare ad altissima velocità con un ambiente Windows.

Per me si tratta di un discorso di GPU o non GPU. Perché acquistare una Tesla P 100 costerebbe circa sei o $7000, mentre noleggiarne una da Google costerebbe circa otto dollari all'ora. Questo offrirebbe una potenza di elaborazione circa 300 volte superiore a quella che le nostre CPU sono in grado di offrire e lo pianificherei per piccoli blocchi di tempo. Immaginate di poter elaborare 300 giorni di lavoro in un solo giorno

Se stiamo parlando di rimanere solo in un ambiente CPU, allora sono d'accordo con te che non ne vale la pena e sarebbe meglio costruire i nostri sistemi.

Jojo e jmtc123,

Perché non provate le strategie giornaliere? Ho lavorato per 2 giorni su EurUsd e ora ho strategie giornaliere che funzionano su 21 mercati con una sola sessione. Tutto sommato devo spendere un po' più di potenza di calcolo per questo, suppongo. Ora i controlli incrociati per i mercati aggiuntivi presentano alcuni bug. Così ho diviso i dati e usato 2013-2018 come IS ed esportato 1986-20121231 e usato come OS nei mercati aggiuntivi. Con il mio corei7 del 2013 (4 core/8 thread) ottengo 400000 strategie all'ora facendo questo retesting su 2 mercati aggiuntivi.

Perché questo flusso di lavoro. Beh, il 99,999% di tutte le strategie viene respinto all'IS, non importa se si tratta di un periodo più o meno lungo, quindi è meglio spostare l'OS fuori dal calcolo, perché spendere la cpu per testare i dati dell'OS quando ha già fallito l'IS.

la build 106 di SQX mostra di nuovo il problema del rallentamento dell'utilizzo della CPU a 70-80%, che è stato risolto nella RC5. Mark può confermare e risolvere il problema nella prossima versione?

Mark,

Inoltre, posso chiedervi se per ogni aggiornamento di versione avete apportato dei miglioramenti anche alla procedura guidata? La generazione meccanica completa non mi permette ancora di ottenere una bella strategia, le mie scommesse si basano ancora sulla mia strategia e su alcune variazioni utilizzando il costruttore di strategie. grazie.