Comment nous testons une stratégie

La version courte

1. 01
   Une règle, écrite noir sur blanc

   Une stratégie est du code sans intervention discrétionnaire. Elle génère ou non un signal sur une bougie, et l'entrée, le stop et les objectifs sont fixés par la règle à cet instant.

2. 02
   Historique de cours réel

   La règle est appliquée aux bougies d'un marché sur un unique horizon temporel, à partir d'un flux de prix que nous exploitons nous-mêmes. Tous les abonnés voient les résultats issus des mêmes données.

3. 03
   Un trade à la fois

   Un nouveau signal n'est comptabilisé qu'une fois le trade précédent parvenu à son premier objectif ou à son stop. Il s'agit ainsi d'un historique qu'une personne aurait pu réellement suivre.

4. 04
   Compté, puis coûté

   Pour chaque trade, nous enregistrons la cible la plus éloignée atteinte. Le taux de réussite, l'espérance et le facteur de profit sont calculés à partir de ces comptages, avant ou après le spread.

Les objectifs et le stop

Le risque est la distance entre l'entrée et le stop, notée 1R. Chaque trade a quatre cibles à 0.5R, 1R, 1.5R, 2R depuis l'entrée. Un trade qui atteint une cible avant son stop est un gain à cette cible, et un trade stoppé en premier est une perte de 1R. Ainsi, un même trade peut être un gain à la première cible et une perte à la quatrième, et le taux de réussite désigne toujours la cible à laquelle il se rapporte.

Un trade encore ouvert au moment du passage n'est pas évalué. Il est comptabilisé une fois clôturé.

Ce que coûte le trading

L'historique des prix est enregistré au bid. Un achat entre à l'ask et sort au bid, et une vente fait l'inverse, de sorte que chaque trade perd un spread. La commission s'ajoute lorsque le compte la facture. Nous exprimons ce coût en part du risque propre au trade : un coût de 0.10R signifie que le spread et la commission ensemble représentent un dixième de la distance au stop.

Le spread ne déplace ni le stop ni les objectifs, il ne change donc jamais l'objectif atteint par un trade. En revanche, il modifie le résultat : un gain rapporte l'objectif moins le coût, et une perte coûte 1R plus le coût. Les spreads sont mesurés à partir des données de marché en direct pour chaque marché, et non supposés.

Historique disponible pour chaque unité de temps

Une fenêtre glissante compte davantage qu'il n'y paraît. Lorsqu'une configuration a 50 trades dans sa fenêtre, perdre deux anciens trades et en gagner deux nouveaux peut faire varier son taux de réussite de plusieurs points et changer le meilleur objectif. C'est une propriété des petits échantillons, non un défaut de la règle, et c'est pourquoi le nombre de trades est affiché à côté de chaque pourcentage.

Les règles qui empêchent un chiffre de prétendre trop

• Un historique de moins de 30 trades est marqué comme insuffisant partout où il apparaît. Le chiffre est affiché, car le masquer serait pire, et il n'est jamais présenté comme un avantage solide.
• Un objectif doit valoir au moins 4 fois le coût aller-retour pour être proposé comme sortie. En deçà, la distance est trop proche du spread pour que l'historique des cours permette de dire de façon fiable si elle a été atteinte.
• Un taux de réussite n'est jamais arrondi à la hausse à 100 % ni à la baisse à 0 %. 373 gains sur 374 trades s'affichent à 99.7 %.
• Un profit factor sans aucun trade perdant s'affiche « no losses », et non comme un grand nombre.
• L'espérance est exprimée en R pour 100 trades, de sorte qu'un résultat sur un petit compte et sur un grand compte se lisent de la même façon.

Ce qu'un backtest omet

• Glissement. Les ordres sont supposés exécutés au prix modélisé. Sur les marchés rapides, ce ne sera pas le cas.
• Swap et frais de financement overnight sur les positions conservées d'un jour à l'autre.
• Le spread propre à votre courtier, qui peut être plus large ou plus serré que celui que nous avons mesuré.
• Indique si vous auriez pris chaque signal. Le relevé suppose que la règle a été suivie à chaque fois.
• L'avenir. Une règle qui a fonctionné sur des données passées n'est pas obligée de continuer à fonctionner.

Une seule source pour chaque chiffre

Chaque exécution nocturne horodate ses résultats avec l'heure de production et la date jusqu'à laquelle ses données de marché vont. Un écran du terminal affiche les chiffres d'une exécution et indique quand deux sources divergent au lieu d'afficher les deux. Les pages de ce site suivent la même règle : une page qui cite un chiffre indique l'exécution dont il provient.

Lire ensuite

• Stratégies

  Ce que chaque stratégie attend, et son bilan sur tous les marchés.

• Outils

  Calculateurs gratuits pour la taille de position, les règles de challenge, la ruine et la taille d'échantillon.

• Recherche

  Ce que nous avons mesuré, avec le run dont il provient et les résultats qui nous ont été défavorables.

• À propos

  Qui se cache derrière le terminal et ce qu'il ne fait pas.