Comment un an de backtesting a tué nos meilleurs indicateurs

Un an de données historiques face à tous les signaux que nous utilisons. Les beaux indicateurs ont perdu. Les ennuyeux ont gagné. Voici ce qui survit au backtest — et pourquoi la plupart des indicateurs sur Twitter n’y survivent pas.

Le take-profit qui ne s’est jamais déclenché

Un signal long que nous exécutions depuis des mois avait un take-profit fixe de 3 %. Le signal lui-même avait bonne allure : 61 % d’accuracy à 4 heures, sample size correct, schéma d’entrée propre. Selon toutes les métriques à l’œil nu, il était gagnant.

La réalité en production disait autre chose. Douze trades, neuf stop-loss, trois sorties à breakeven. Total : négatif.

Le backtest a révélé le problème instantanément. Excursion favorable maximale moyenne des douze trades : 0,61 %. L’objectif de 3 % était inatteignable. Le prix n’allait jamais aussi loin avant de se retourner. Nous attendions un payoff qui n’existe pas dans les données.

MFE et MAE — les métriques que personne ne cite

La plupart des articles sur les stratégies parlent de win rate, de profit factor, de Sharpe. Ils ne parlent ni de maximum favorable excursion (jusqu’où le trade est allé en votre faveur à son pic) ni de maximum adverse excursion (jusqu’où il est allé contre vous au pire moment).

Ces deux chiffres vous disent si votre stop-loss et votre take-profit sont réalistes pour la stratégie.

• Si votre TP est > MFE moyenne : vous ne l’atteindrez jamais. Les trades expirent ou sont clôturés par le trailing avant.
• Si votre SL est < MAE moyenne : le bruit vous sort. La stratégie n’a pas échoué — le SL était trop tight.
• MFE moyenne < MAE moyenne : la stratégie a une espérance négative. Abandonnez-la.

Ce qu’a révélé l’année de backtest

Nous avons confronté 365 jours de données historiques — flow institutionnel, on-chain, positionnement sur les dérivés — à chaque combo que nous suivons. 63 combos au total. L’histogramme d’accuracy a surpris :

• 8 combos à >75 % d’accuracy à 4 h : en majorité de direction DOWN (shorts), portés par des schémas d’épuisement de liquidité + funding squeeze.
• 15 combos à 60-75 % : exploitables avec discipline.
• 40 combos à 50-60 % : des coinflips avec des étapes en plus. Beaucoup étaient nos « meilleurs » indicateurs à l’intuition.

La répartition a surpris. La plupart des combos shorts ont battu la plupart des combos longs en accuracy élevée. Ce n’est pas une opinion de marché — c’est ce qu’a dit l’année de données.

Le TP/SL optimal que calculent les données

Pour chaque combo, nous avons calculé les TP et SL optimaux à partir de la distribution MFE/MAE. Le résultat coïncidait rarement avec notre intuition :

• Un combo avec une MFE moyenne de 0,30 % veut un TP proche de 0,30 %. Pas 1 %. Pas 3 %.
• Un combo avec une MAE moyenne de 0,15 % veut un SL proche de 0,40-0,60 % (il laisse respirer le bruit). Pas 0,30 % (touché trop souvent). Pas 1 % (il laisse courir le perdant).
• Le R:R n’est pas un paramètre d’entrée. C’est une conséquence dérivée de la distribution MFE/MAE.

Ce que nous tuons, ce que nous gardons

La règle de décision que nous appliquons après le backtest :

• Accuracy sur le timeframe cible < 55 % → tuer (ou observation seule).
• Accuracy > 55 % mais MFE moyenne < coûts de transaction → tuer (l’edge est mangé par les fees).
• Accuracy > 60 % ET MFE > 2× MAE → garder.
• Entre les deux → exige un gate de confirmation de régime (filtre de contexte bull/bear) avant le passage en live.

Sur les 63 combos backtestés, 23 sont arrivés en production. Les autres sont désactivés ou en mode observation — ils enregistrent les trades hypothétiques sans les exécuter, afin de continuer à valider sur des données futures.

Pourquoi votre indicateur préféré perd probablement de l’argent

Les indicateurs qui ont fière allure sur un graphique présentent généralement l’un de ces problèmes :

• Look-ahead bias : les lignes sont lisses parce qu’elles intègrent des données du futur.
• Survivorship : vous vous souvenez des fois où il a fonctionné et oubliez celles où il n’a pas fonctionné.
• Curve-fit : les paramètres ont été ajustés au graphique que vous regardez et ne se généralisent pas.
• Mauvais horizon : il prédit bien le prochain mouvement à 1 h mais vous le tradez en 5 min et le bruit vous mange l’edge.

Aucun ne survit à un an de backtest avec une validation out-of-sample en conditions réelles. La plupart de ceux de votre watch-list non plus.

Si un signal paraît trop propre, le test est le suivant : passez-le sur une année entière de données avec des fees et un slippage réalistes. S’il fonctionne toujours, vous avez trouvé de l’edge. En général, ce n’est pas le cas, et vous vous êtes épargné un trimestre de pertes.