Files
Anubis/docs/backtests/crypto_trend.md
T
Alby96andClaude Opus 5.5 9ac159a7db
ci / test (postgres) (push) Successful in 3m52s
ci / test (sqlite) (push) Failing after 2m41s
ci / image (push) Skipped
Fix the defects of the Phase 5 review (refs #41 #42 #43 #44 #45 #46)
An independent review found these, now fixed and tested:

- Risk limits could be raised through PUT /api/settings without the
  phrase and the password. The API now refuses risk keys.
- The reference equity counted results twice after reduced to real and
  after a demotion. Each ledger now keeps a baseline, and carried results
  stay in the ledger's currency until the reference is computed.
- An instrument could be bought by a second strategy in the same account
  (SPEC 8.6), and purchases under way did not hold their cash, so several
  purchases sent together could exceed it. Both are refused or shrunk now.
- After an automatic trip of the switch there was no way to restart from
  the interface. Rischio now shows the trip of both worlds and the restart.
- The fresh password of SPEC 12.4 could be tried without limit. Five wrong
  attempts in 15 minutes now lock it.
- Observation to simulation skipped the 90 days of live signals.
- A new build changed the qualification of a strategy with real money,
  "Ferma tutto" counted as a critical incident, raising risk ignored
  demotion conditions in progress, and weekends counted as stock sessions.
- The 12.4 confirmation now summarises capital, first purchases and limits,
  and live strategies show the gap with their simulated twin.

The backtest converts each bar with the rate fixed before it opens, the
day before, and the report now counts how often correctives and risk
changed a decision. crypto_trend is still not passed: the broad universe
now falls 32.8%. The outcome file also keeps the qualified parameters.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
2026-11-11 16:48:41 +01:00

287 lines
13 KiB
Markdown
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
# Backtest di `crypto_trend` (Trend crypto)
**Esito: non superato.** Protocollo non superato. Universo ampio: calo massimo 32,8%, serve ≤ 25%. BTC, ETH e SOL: probabilità di sovra-adattamento (pbo) 0,835, serve ≤ 0,40. Resta in osservazione.
Calcolato il 2026-11-11 con la versione 1 della strategia. Soglie, griglia dei parametri, costi e date erano fissati prima del calcolo (SPEC 12.2) e non sono stati cambiati dopo.
Per rifarlo: `anubis backtest base --to 2026-10-31`. Il file dell'esito, letto dal bot al primo avvio, è `docs/backtests/crypto_trend.outcome.json`.
## Dati
- Archivi giornalieri di data.binance.vision in USDT, ogni file controllato con la sua impronta SHA-256 prima dell'uso.
- Prezzi convertiti in euro con il cambio EUR/USD della BCE del giorno (7133 giorni di cambi), contando un USDT come un dollaro. Le coppie in euro di OKX esistono solo da novembre 2023: questo storico è un'approssimazione (SPEC 8.1).
- 47 coppie nell'universo ampio, comprese quelle poi chiuse da Binance: ogni mese la strategia sceglie le 10 con più scambi tra quelle quotate da almeno 400 giorni.
- Lo spread non si può misurare su questo storico: il filtro dello spread vale solo dal vivo.
- Senza archivi nel periodo, quindi non usate: BCCEUR, VENEUR.
## Riepilogo
| Prova | Variante scelta | Rendimento annuo | Calo massimo | Netto a costi doppi | DSR | PBO | Esito |
|---|---|---:|---:|---:|---:|---:|---|
| Universo ampio | `coin_vol=10;max_stop=20` | 10,4% | −32,8% | 7.264,22 € | 0,924 | 0,085 | non superata |
| BTC, ETH e SOL | `coin_vol=20;max_stop=10` | 12,2% | −15,0% | 10.274,96 € | 0,961 | 0,835 | non superata |
## Cosa conserva il bot
- Calo massimo del backtest: −32,8%. Dal vivo, un calo oltre 1,5 volte questo riporta la strategia indietro (SPEC 12.3).
- Scostamento di prezzo previsto: 11,94 punti base; costo stimato di andata e ritorno 0,64%.
- Percorso atteso al 5° percentile (ricampionamento a blocchi dei rendimenti giornalieri): −5,1% dopo 30 giorni, −8,0% dopo 90, −14,1% dopo 365. Venti sedute di fila sotto questo percorso riportano la strategia indietro.
## Universo ampio
Le 10 monete con più scambi, scelte ogni mese tra 47 coppie (anche quelle poi chiuse).
Dal 01/01/2019 al 31/10/2026, 2861 chiusure giornaliere, capitale iniziale 10.000,00 €. Variante scelta: `coin_vol=10;max_stop=20` (la zona della griglia dove il risultato cambia meno, non la migliore). Impronta del piano `b5f566d59bfa`, dei dati `840015607150`.
| | Strategia | Comprare e tenere |
|---|---:|---:|
| Risultato netto | 11.628,28 € | 82.820,55 € |
| Rendimento totale | 116,3% | 828,2% |
| Rendimento annuo | 10,4% | 32,9% |
| Volatilità annua | 14,2% | 74,7% |
| Calo massimo | −32,8% (11/2021 → 10/2023) | −85,8% |
| Sharpe annuo | 0,77 | 0,76 |
| Operazioni chiuse | 1842 | 0 |
| Operazioni in guadagno | 13,1% | — |
| Rapporto guadagni/perdite | 1,47 | — |
| Commissioni pagate | 2.967,95 € | 20,00 € |
| Tempo investito | 16,9% | 92,0% |
**Per anno**
| Anno | Strategia | Comprare e tenere |
|---|---:|---:|
| 2019 | 17,0% | 4,8% |
| 2020 | 36,2% | 103,2% |
| 2021 | 19,8% | 1.603,8% |
| 2022 | −11,2% | −79,9% |
| 2023 | 12,2% | 56,4% |
| 2024 | 26,2% | 33,8% |
| 2025 | −7,4% | −32,9% |
| 2026 | −2,6% | −9,4% |
**Sensibilità ai costi** (commissioni e scostamento moltiplicati insieme)
| Costi | Risultato netto | Rendimento totale | Sharpe annuo | Calo massimo | Commissioni |
|---|---:|---:|---:|---:|---:|
| ×1 | 11.628,28 € | 116,3% | 0,77 | −32,8% | 2.967,95 € |
| ×2 | 7.264,22 € | 72,6% | 0,56 | −35,8% | 5.039,47 € |
| ×3 | 3.522,91 € | 35,2% | 0,34 | −38,9% | 6.471,34 € |
**Convalide**
- Finestre che avanzano (4, con 29 giorni di stacco): rendimento fuori campione 58,4%, Sharpe annuo 0,58.
- K-fold purgato combinatorio (6 gruppi, 2 di prova, 15 divisioni): Sharpe annuo medio dei percorsi 0,77, peggiore 0,77, percorsi positivi 100,0%.
- Deflated Sharpe Ratio 0,92, contando 9 varianti provate in tutto.
- Probabilità di sovra-adattamento (PBO) 0,09, su 12870 combinazioni di 9 varianti.
- Sguardo in avanti: 8583 decisioni rifatte tagliando i dati in 6 punti, 0 cambiate.
**Soglie**
| Controllo | Valore | Soglia | Esito |
|---|---:|---:|---|
| Risultato netto con costi doppi | 7.264,22 € | > 0,00 € | superato |
| Deflated Sharpe Ratio | 0,924 | ≥ 0,9 | superato |
| Probabilità di sovra-adattamento (PBO) | 0,085 | ≤ 0,4 | superato |
| Calo massimo | 32,8% | ≤ 25% | **non superato** |
| Decisioni cambiate aggiungendo dati successivi | 0 | = 0 | superato |
**Varianti della griglia**
| Parametri | Sharpe annuo | Stabilità della zona | Risultato netto | Calo massimo | Operazioni |
|---|---:|---:|---:|---:|---:|
| `coin_vol=10;max_stop=10` | 0,54 | 0,54 | 5.784,07 € | −24,0% | 2269 |
| `coin_vol=10;max_stop=15` | 0,86 | 0,66 | 13.191,01 € | −27,8% | 2008 |
| `coin_vol=10;max_stop=20` (scelta) | 0,77 | 0,75 | 11.628,28 € | −32,8% | 1842 |
| `coin_vol=15;max_stop=10` | 0,39 | 0,39 | 3.932,83 € | −26,3% | 2281 |
| `coin_vol=15;max_stop=15` | 0,71 | 0,61 | 10.147,48 € | −31,9% | 2015 |
| `coin_vol=15;max_stop=20` | 0,68 | 0,68 | 9.971,55 € | −33,4% | 1853 |
| `coin_vol=20;max_stop=10` | 0,35 | 0,35 | 3.437,00 € | −26,8% | 2284 |
| `coin_vol=20;max_stop=15` | 0,59 | 0,55 | 7.855,25 € | −33,4% | 2021 |
| `coin_vol=20;max_stop=20` | 0,57 | 0,57 | 7.673,22 € | −34,6% | 1856 |
**Interventi di correttivi e rischio sulla variante scelta**
Quante volte, per strumento e giorno, un correttivo o una regola di rischio ha cambiato ciò che la strategia chiedeva.
| Motivo | Volte |
|---|---:|
| `crypto_regime_below_average` | 3565 |
| `risk_reduction` | 1590 |
| `crypto_regime_high_volatility` | 151 |
| `trade_risk_limit` | 43 |
| `switch_tripped` | 34 |
| `daily_loss_block` | 14 |
| `stop_above_price` | 13 |
**Note del motore di prova**
Ordini non eseguiti come chiesto: sotto il minimo, residui lasciati dopo un'uscita, liquidità.
| Motivo | Volte |
|---|---:|
| `residue_written_off` | 1837 |
| `below_min_notional` | 449 |
**Strumenti**
| Coppia | Prima barra | Ultima barra | Barre |
|---|---|---|---:|
| ADAEUR | 2018-04-17 | 2026-10-31 | 3120 |
| APEEUR | 2022-03-17 | 2026-10-31 | 1690 |
| ARBEUR | 2023-03-23 | 2026-10-31 | 1319 |
| ATOMEUR | 2019-04-29 | 2026-10-31 | 2743 |
| AVAXEUR | 2020-09-22 | 2026-10-31 | 2231 |
| BCHABCEUR | 2018-11-16 | 2019-11-28 | 378 |
| BCHEUR | 2019-11-28 | 2026-10-31 | 2530 |
| BCHSVEUR | 2018-11-16 | 2019-04-22 | 158 |
| BNBEUR | 2017-11-06 | 2026-10-31 | 3282 |
| BTCEUR | 2017-10-08 | 2026-10-31 | 3311 |
| DASHEUR | 2019-03-28 | 2026-10-31 | 2775 |
| DOGEEUR | 2019-07-05 | 2026-10-31 | 2676 |
| DOTEUR | 2020-08-18 | 2026-10-31 | 2266 |
| EOSEUR | 2018-05-28 | 2025-05-26 | 2556 |
| ETCEUR | 2018-06-12 | 2026-10-31 | 3064 |
| ETHEUR | 2017-10-08 | 2026-10-31 | 3311 |
| FILEUR | 2020-10-15 | 2026-10-31 | 2208 |
| FTTEUR | 2019-12-20 | 2022-11-15 | 1062 |
| GMTEUR | 2022-03-09 | 2026-10-31 | 1698 |
| ICXEUR | 2018-06-13 | 2026-09-03 | 3005 |
| IOTAEUR | 2018-05-31 | 2026-10-31 | 3076 |
| LINKEUR | 2019-01-16 | 2026-10-31 | 2846 |
| LTCEUR | 2017-12-13 | 2026-10-31 | 3245 |
| LUNAEUR | 2020-08-21 | 2022-05-13 | 631 |
| MATICEUR | 2019-04-26 | 2024-09-10 | 1965 |
| NEAREUR | 2020-10-14 | 2026-10-31 | 2209 |
| NEOEUR | 2017-11-20 | 2026-10-31 | 3268 |
| ONTEUR | 2018-06-08 | 2026-10-31 | 3068 |
| OPEUR | 2022-06-01 | 2026-10-31 | 1614 |
| ORDIEUR | 2023-11-07 | 2026-10-31 | 1090 |
| PEPEEUR | 2023-05-05 | 2026-10-31 | 1276 |
| POLEUR | 2024-09-13 | 2026-10-31 | 779 |
| QTUMEUR | 2018-03-19 | 2026-10-31 | 3149 |
| SANDEUR | 2020-08-14 | 2026-10-31 | 2270 |
| SHIBEUR | 2021-05-10 | 2026-10-31 | 2001 |
| SOLEUR | 2020-08-11 | 2026-10-31 | 2273 |
| SUIEUR | 2023-05-03 | 2026-10-31 | 1278 |
| TONEUR | 2024-08-08 | 2026-06-30 | 692 |
| TRUMPEUR | 2025-01-19 | 2026-10-31 | 651 |
| TRXEUR | 2018-06-11 | 2026-10-31 | 3065 |
| UNIEUR | 2020-09-17 | 2026-10-31 | 2236 |
| VETEUR | 2018-07-25 | 2026-10-31 | 3021 |
| WIFEUR | 2024-03-05 | 2026-10-31 | 971 |
| XLMEUR | 2018-05-31 | 2026-10-31 | 3076 |
| XMREUR | 2019-03-15 | 2024-02-20 | 1804 |
| XRPEUR | 2018-05-04 | 2026-10-31 | 3103 |
| ZECEUR | 2019-03-21 | 2026-10-31 | 2782 |
## BTC, ETH e SOL
Solo le tre coppie in euro con la liquidità migliore.
Dal 01/01/2019 al 31/10/2026, 2861 chiusure giornaliere, capitale iniziale 10.000,00 €. Variante scelta: `coin_vol=20;max_stop=10` (la zona della griglia dove il risultato cambia meno, non la migliore). Impronta del piano `1ce210e9cbcb`, dei dati `3b890d6f2ef3`.
| | Strategia | Comprare e tenere |
|---|---:|---:|
| Risultato netto | 14.642,97 € | 216.831,80 € |
| Rendimento totale | 146,4% | 2.168,3% |
| Rendimento annuo | 12,2% | 49,0% |
| Volatilità annua | 11,8% | 72,2% |
| Calo massimo | −15,0% (11/2021 → 10/2023) | −86,7% |
| Sharpe annuo | 1,03 | 0,92 |
| Operazioni chiuse | 539 | 0 |
| Operazioni in guadagno | 16,7% | — |
| Rapporto guadagni/perdite | 1,76 | — |
| Commissioni pagate | 2.866,85 € | 20,00 € |
| Tempo investito | 12,9% | 95,2% |
**Per anno**
| Anno | Strategia | Comprare e tenere |
|---|---:|---:|
| 2019 | 20,8% | 29,3% |
| 2020 | 29,0% | 219,6% |
| 2021 | 14,1% | 647,5% |
| 2022 | −6,7% | −81,5% |
| 2023 | 27,3% | 257,8% |
| 2024 | 20,9% | 92,3% |
| 2025 | −5,5% | −31,3% |
| 2026 | 2,3% | −16,1% |
**Sensibilità ai costi** (commissioni e scostamento moltiplicati insieme)
| Costi | Risultato netto | Rendimento totale | Sharpe annuo | Calo massimo | Commissioni |
|---|---:|---:|---:|---:|---:|
| ×1 | 14.642,97 € | 146,4% | 1,03 | −15,0% | 2.866,85 € |
| ×2 | 10.274,96 € | 102,7% | 0,82 | −18,9% | 5.161,91 € |
| ×3 | 6.273,26 € | 62,7% | 0,59 | −21,3% | 6.782,83 € |
**Convalide**
- Finestre che avanzano (4, con 29 giorni di stacco): rendimento fuori campione 82,4%, Sharpe annuo 0,85.
- K-fold purgato combinatorio (6 gruppi, 2 di prova, 15 divisioni): Sharpe annuo medio dei percorsi 0,90, peggiore 0,82, percorsi positivi 100,0%.
- Deflated Sharpe Ratio 0,96, contando 18 varianti provate in tutto.
- Probabilità di sovra-adattamento (PBO) 0,83, su 12870 combinazioni di 9 varianti.
- Sguardo in avanti: 8583 decisioni rifatte tagliando i dati in 6 punti, 0 cambiate.
**Soglie**
| Controllo | Valore | Soglia | Esito |
|---|---:|---:|---|
| Risultato netto con costi doppi | 10.274,96 € | > 0,00 € | superato |
| Deflated Sharpe Ratio | 0,961 | ≥ 0,9 | superato |
| Probabilità di sovra-adattamento (PBO) | 0,835 | ≤ 0,4 | **non superato** |
| Calo massimo | 15,0% | ≤ 25% | superato |
| Decisioni cambiate aggiungendo dati successivi | 0 | = 0 | superato |
**Varianti della griglia**
| Parametri | Sharpe annuo | Stabilità della zona | Risultato netto | Calo massimo | Operazioni |
|---|---:|---:|---:|---:|---:|
| `coin_vol=10;max_stop=10` | 0,98 | 0,95 | 8.962,80 € | −11,2% | 539 |
| `coin_vol=10;max_stop=15` | 0,91 | 0,91 | 9.287,93 € | −13,3% | 457 |
| `coin_vol=10;max_stop=20` | 0,97 | 0,95 | 10.893,96 € | −13,9% | 393 |
| `coin_vol=15;max_stop=10` | 1,00 | 0,97 | 12.333,91 € | −13,5% | 539 |
| `coin_vol=15;max_stop=15` | 0,91 | 0,91 | 12.048,69 € | −16,1% | 457 |
| `coin_vol=15;max_stop=20` | 0,99 | 0,96 | 14.421,53 € | −16,5% | 393 |
| `coin_vol=20;max_stop=10` (scelta) | 1,03 | 0,98 | 14.642,97 € | −15,0% | 539 |
| `coin_vol=20;max_stop=15` | 0,97 | 0,97 | 14.521,59 € | −17,1% | 457 |
| `coin_vol=20;max_stop=20` | 1,02 | 0,97 | 16.651,30 € | −16,6% | 393 |
**Interventi di correttivi e rischio sulla variante scelta**
Quante volte, per strumento e giorno, un correttivo o una regola di rischio ha cambiato ciò che la strategia chiedeva.
| Motivo | Volte |
|---|---:|
| `crypto_regime_below_average` | 1104 |
| `crypto_regime_high_volatility` | 52 |
| `trade_risk_limit` | 41 |
| `stop_above_price` | 3 |
| `daily_loss_block` | 1 |
**Note del motore di prova**
Ordini non eseguiti come chiesto: sotto il minimo, residui lasciati dopo un'uscita, liquidità.
| Motivo | Volte |
|---|---:|
| `residue_written_off` | 539 |
| `below_min_notional` | 105 |
**Strumenti**
| Coppia | Prima barra | Ultima barra | Barre |
|---|---|---|---:|
| BTCEUR | 2017-10-08 | 2026-10-31 | 3311 |
| ETHEUR | 2017-10-08 | 2026-10-31 | 3311 |
| SOLEUR | 2020-08-11 | 2026-10-31 | 2273 |
## Cosa il backtest non rappresenta
- I correttivi senza una storia ricostruibile (notizie, calendario economico, trimestrali, modello) non ricevono dati e non intervengono.
- Le decisioni si prendono sulla chiusura e si eseguono all'apertura della seduta dopo, con lo scostamento stimato: nessun inseguimento con ordini limite.
- Sharpe e volatilità sono calcolati senza tasso privo di rischio.
- Limiti di rischio e regime crypto applicati come dal vivo. La strategia è il 40% del bot: il resto conta come liquidità ferma. Ogni chiusura vale come un giorno; se scatta l'interruttore, supponiamo che tu riparta dopo sette giorni. Età dei prezzi, prezzo dell'ordine e orologio esistono solo dal vivo.
- Prezzi dello storico Binance in USDT convertiti in euro con il cambio BCE del giorno, contando un USDT come un dollaro: è un'approssimazione delle coppie in euro di OKX. Su questo storico lo spread non si può misurare: l'universo sono le monete con più scambi, passo di prezzo e quantità minima sono stime, i costi sono quelli di OKX.