Backtest e sobreajuste
Gestão de risco

Backtest e sobreajuste

7 cartões e 4 perguntas rápidas. Cerca de 2 min.

A lição completa

  1. Antes de arriscar dinheiro de verdade em uma regra como “comprar quando o preço fecha acima da média de 50 dias”, dá para testá-la no passado. Isso é fazer um backtest.

  2. Um backtest mostra com que frequência a regra acertou, o ganho e a perda médios, a pior sequência de perdas e o maior drawdown.

  3. A armadilha é o sobreajuste (overfitting): mexer nos parâmetros até a regra se encaixar perfeitamente no passado. Ela aprendeu o ruído, não um padrão real, e falha com dados novos.

  4. Teste do jeito certo: crie a regra com um período e depois confira em dados que ela nunca viu, em mercados e condições diferentes.

  5. Sempre inclua os custos: spreads, corretagens, slippage. Uma regra que ganha 0,1% por operação antes dos custos perde dinheiro se cada operação custa 0,15%.

  6. Erro comum

    Erro: “funcionou por 10 anos, então vai funcionar no ano que vem”. O mercado muda. Um backtest é uma evidência, não uma garantia.

  7. Ponto principal

    Teste no passado, confira em dados novos, inclua todos os custos e mantenha as regras simples.

Teste rápido

  1. Backtest é...
    1. Testar uma regra em preços passados
    2. Testar uma regra com dinheiro de verdade
    3. Prever o preço da semana que vem
    Você vê como uma regra teria se saído antes de arriscar dinheiro de verdade.
  2. Sobreajuste significa...
    1. A regra se encaixa no passado, mas falha com dados novos
    2. A regra é simples demais para dar lucro
    3. A regra funciona em todos os mercados
    Ajustada demais aos dados antigos, a regra aprendeu ruído em vez de um padrão real.
  3. Para confiar mais em um backtest, teste a regra em...
    1. Mercados e períodos diferentes
    2. Os mesmos dados usados para criá-la
    3. Só o melhor ano dela
    Uma vantagem real precisa se sustentar em dados que não foram usados para criar a regra.
  4. Uma regra ganha 0,1% por operação antes dos custos, e cada operação custa 0,15%. Depois dos custos, ela...
    1. Perde dinheiro
    2. Dobra o lucro
    3. Fica exatamente no zero a zero
    0,1% − 0,15% = −0,05% por operação. Os custos transformaram uma regra vencedora em perdedora.

Palavras desta lição

Gestão de risco

  1. Sua saída de emergência: o stop loss
  2. Quanto arriscar
  3. Risco e retorno
  4. Taxa de acerto não é tudo
  5. A matemática das perdas
  6. Continuar no jogo
  7. Backtest e sobreajuste
Pratique agora: Sniper do stop loss Pratique agora: Matemática da sobrevivência Pratique agora: Armadilha do martingale