Overfitting backtestu

Dopasowanie strategii do przypadkowych cech próby zamiast do relacji, która utrzymuje się poza nią.

Im więcej wariantów strategii sprawdzisz na tych samych danych, tym większa szansa, że któryś wygląda genialnie przez czysty przypadek. Dobrze dobrane parametry mogą opisywać wyłącznie szum konkretnego wycinka historii. Sam wynik backtestu nic nie znaczy, dopóki nie wiesz, ile prób go poprzedziło.

Powiązane pojęcia

  • Wielokrotne testowanie
  • PBO
  • Walk-forward
  • Próba treningowa/testowa