aussi : overfitting, surajustement de courbe, biais d'exploration de données
Le surajustement consiste à régler les paramètres d'un EA si précisément sur des données historiques que la stratégie brille en backtest et déçoit sur des données inédites, parce qu'elle exploite le bruit plutôt que de vrais schémas de marché.
Régler les règles jusqu'à ce qu'elles collent au passé de si près qu'elles en ont appris les accidents plutôt que les schémas. Le backtest s'améliore pendant que la stratégie se dégrade, et rien dans le rapport ne distingue les deux.
Le surajustement est le mode de défaillance qui produit de belles preuves, et c'est pour cela qu'il survit à un examen qu'une mauvaise stratégie ne passerait pas. Chaque passe d'optimisation améliore le résultat affiché, qu'elle améliore ou non la stratégie ; un processus qui ne regarde que le résultat affiché ne peut donc pas faire la différence.
Un optimiseur renvoie les dix meilleurs jeux de paramètres d'une stratégie. La ligne du haut est celle qui est publiée ; c'est la forme du tableau autour d'elle qui dit vraiment si l'avantage est réel.
Un vrai avantage se dégrade doucement quand les paramètres s'éloignent de l'optimum. Un avantage ajusté tombe d'une falaise, et la falaise est visible avant d'avoir dépensé la moindre donnée hors échantillon.
Calcul 2,41 dans l'échantillon → 0,88 hors échantillon, tandis que les voisins restent au seuil de rentabilité
Résultat Le 2,41 était une propriété de la fenêtre, pas des règles
Le surajustement se diagnostique à partir du processus qui a produit le résultat, pas du résultat. Demandez ce qui a été réglé, sur quoi, et ce qui a été mis de côté.
| Plage | Ce que cela signifie |
|---|---|
| Une seule fenêtre, tous les paramètres optimisés, rien de réservé | Le rapport n'a aucune valeur probante sur l'avenir. Il décrit à quel point les règles peuvent être pliées à un échantillon. |
| Fenêtre hors échantillon affichée mais réutilisée après chaque ajustement | La réserve est dépensée. Dès que ses résultats reviennent nourrir le réglage, elle est elle aussi dans l'échantillon. |
| Une unique fenêtre hors échantillon intacte, regardée une fois | Le standard minimal. Interprétez l'écart plutôt que le niveau. |
| Walk-forward avec large plateau de paramètres et vérifications sur plusieurs instruments | La meilleure preuve disponible avant le déploiement en réel, parce que le réajustement lui-même a été testé. |
Les fiches AIStrategyMiner indiquent leur fenêtre de données, leur modèle de testeur et leur nombre de trades, de sorte qu'un lecteur peut poser les questions ci-dessus au lieu de croire la courbe sur parole.
Chaque fois qu'un résultat de la fenêtre réservée guide un nouvel ajustement, cette fenêtre rejoint les données d'entraînement. Après quelques tours il ne reste plus rien hors échantillon, et le processus paraît plus rigoureux tout en prouvant moins.
Ce sont précisément les chiffres que l'ajustement gonfle. Un Sharpe supérieur à 3 dans l'échantillon sur un EA grand public est plus probablement un symptôme qu'une garantie.
Le nombre de paramètres est une voie ; la sélection de stratégies en est une autre. Choisir la meilleure de deux cents stratégies simples sur la même fenêtre épouse l'échantillon tout aussi efficacement que de régler une seule stratégie compliquée.
Cela restaure le backtest et répète l'échec, car le nouvel ajustement sort du même processus que l'ancien. La première question à trancher est de savoir si l'avantage initial a jamais été hors échantillon.
| Sur les 14 EA publiés ici | Valeur |
|---|---|
| Facteur de profit dans l’échantillon | 1,27–1,52 |
| Fiches avec un facteur de profit sous 1,00 | 0 |
| Avec un bloc hors échantillon publié | 11 |
| Rendement hors échantillon | −0,57 % à +3,01 % |
| Blocs hors échantillon en perte | 2 |
| Courses vérifiées sur un compte en argent réel | 0 |
Lisez la dernière ligne avant la première. Un backtest glissant tourne toujours sur une histoire que quelqu’un aurait pu consulter : rien de ce qui précède n’est donc hors échantillon au sens qui tranche quoi que ce soit — et trois EA ont annoncé une date de début de réserve sans publier le moindre résultat depuis, ce à quoi ressemble le biais de publication vu de l’intérieur.
Le point faible est la taille, pas le signe. L’enregistrement médian dans l’échantillon est ici de 362 trades clôturés ; le bloc réservé médian en compte 21. Une course aussi courte ne peut pas séparer un avantage d’un trimestre calme, et c’est pourquoi les petits négatifs (−0,57 %, −0,47 %) ne portent pas plus de verdict que les positifs.
Le menu déroulant Forward du Testeur de stratégies (No, 1/2, 1/3, 1/4, Custom) découpe l’intervalle pour vous. Il ne peut pas vous empêcher de relire la moitié avant après chaque passe d’optimisation, et c’est cette relecture qui la dépense. Réglez Forward sur Custom avec la date à laquelle vous avez cessé de regarder — le 2026-04-01 pour dix des blocs ci-dessus — et la réserve ne vaut que ce qui tombe dedans : 142 trades pour Cairn, 40 pour le suivant, des nombres à un chiffre pour deux d’entre eux.
