For hvert marked og hver periode findes der indstillinger, der set i bakspejlet ser fremragende ud. At finde dem er ingen kunst, bare regnetid. Spørgsmålet er altid kun, om de stadig holder i morgen — og det giver ingen backtest i verden svar på.
Overtilpasning
Den, der prøver 142.560 kombinationer, finder uundgåeligt nogle, der ser gode ud — også selvom det er ren tilfældighed. Ved så mange forsøg er det ikke en mulighed, men statistik. Den delte periode og stabilitetskarakteren bremser det, men afskaffer det ikke.
Markedet skifter karakter
En indstilling, der har klaret to års sidelæns bevægelse, kan give alt tilbage i den første trendfase. Ingen historisk periode indeholder den markedsfase, der kommer som den næste.
Udførelsen er venligere i testen end i virkeligheden
Gebyrer og et tillæg for slippage er regnet med. Ikke gengivet er delvise udførelser, kursudsving i tynde øjeblikke og det forhold, at ordren netop i hektiske faser udføres dårligere end antaget. En backtest er dermed systematisk en smule for optimistisk — ikke tilfældigt, men i én retning.
Få handler beviser intet
En træfprocent på 80 % ud fra ti handler er en anekdote. Derfor indgår antallet i vurderingen — men tjek alligevel selv, hvor mange handler der står bag en række, før du overtager den.
Ét marked er ét marked
En indstilling, der kun virker på Bitcoin og ingen andre steder, har sandsynligvis lært Bitcoins fortid udenad. Test den på tre eller fire andre markeder. Holder den dér nogenlunde, er det et langt bedre tegn end noget tal fra første kørsel.
Sådan bruger du den: backtest til at sortere fra, ikke til at vælge. Den fortæller dig pålideligt, hvad der
ikke virker. Det, der er tilbage, lader du køre i demo — i flere uger og længe nok til at have set en dårlig periode. Først det er et bevis.
Til de otte botter →