Ir para o conteúdo
Bajamar

Guia

Backtest: como testar uma estratégia sem se enganar

Para fazer um backtest honesto de uma estratégia de trading, escreva a regra antes de olhar os dados, conte todos os custos e compare o resultado com duas alternativas simples: a mesma estratégia entrando ao acaso e não fazer nada. Se ela não bate as duas depois dos custos, com operações suficientes, não tem uma vantagem em que você possa confiar. E mesmo que bata, passado não é futuro: o backtest serve para descartar ideias ruins, não para provar que uma boa vai continuar funcionando.

O que é um backtest, e o que não é

Um backtest repete uma regra sobre preços passados e registra cada operação que ela teria feito: quando teria comprado, quando teria vendido e com quanto teria ficado depois dos custos. Ele responde a uma pergunta bem específica: essa regra exata teria funcionado nesse passado exato?

Não é uma previsão. Os mercados mudam, e uma regra que se encaixava num trecho da história pode falhar no seguinte. Pense no backtest como um jeito barato de jogar fora ideias ruins, não como um jeito de provar as boas.

Duas referências que toda estratégia precisa bater

Não fazer nada. Compare a estratégia com simplesmente ficar com o ativo nas mesmas datas. Num mercado em alta, quase qualquer regra que compra parece esperta; a pergunta é se ela se saiu melhor do que não operar.

Entradas ao acaso. Mantenha tudo igual, as saídas, o tamanho e o número de operações, mas escolha os momentos de entrada ao acaso. Rode centenas dessas versões. Se a sua regra não supera a grande maioria delas, por exemplo 95 de cada 100, o sinal de entrada não acrescenta nada que a sorte não daria.

Conte todos os custos

Backtest sem custos é ficção. Em cada operação, conte a taxa da rede, a taxa de prioridade se houver, as taxas dos mercados por onde passa o swap, o slippage e o impacto da sua própria ordem no preço, na entrada e na saída.

Seja pessimista com os preços. Suponha que você compra um pouco mais caro e vende um pouco mais barato do que o preço dos seus dados, principalmente em mercados com pouca liquidez ou logo depois de um movimento brusco, quando todo mundo tenta operar ao mesmo tempo.

Depois aperte: dobre os custos e rode de novo. Uma estratégia cuja vantagem some quando os custos sobem um pouco nunca teve muita vantagem.

Sobreajuste: quando a estratégia decora o passado

Cada parâmetro que você acrescenta e cada ajuste que faz depois de olhar os resultados ajudam a regra a se encaixar no ruído dos seus dados. Com botões suficientes, qualquer história pode parecer lucrativa, e nada disso vale para o que vem pela frente.

Escreva a regra antes de testá-la e não a mude depois de ver os resultados. Se testar variantes, conte todas, inclusive as que falharam. Testar vinte versões e mostrar a melhor não é um teste; é uma loteria com o ganhador escolhido depois.

Guarde uma parte dos dados. Construa e ajuste a regra num período e depois rode-a uma única vez, sem mexer, num período que ela nunca viu. Se ali ela desaba, o primeiro resultado foi sorte.

Poucas operações, pouca história

Uma dúzia de operações é ruído. Com poucas operações, um único acerto de sorte pode fazer uma estratégia inteira parecer boa. Procure pelo menos dezenas de operações, espalhadas por dias diferentes e por mercados diferentes.

Não julgue só pelo total. Olhe o resultado médio por operação depois dos custos junto com a margem de erro, a pior queda no caminho e a pior sequência de perdas. Uma estratégia que você não aguentaria num mês ruim é uma estratégia que você vai abandonar na pior hora.

Outras formas de um backtest mentir

Usar dados que ainda não existiam. Usar informação que não estava disponível na hora da decisão, como o preço de fechamento de um dia para decidir uma operação durante esse mesmo dia, faz qualquer regra parecer melhor do que jamais poderia ser.

Ficar só com os sobreviventes. No mundo cripto, muitos tokens desaparecem; testar só com os que continuam vivos hoje esconde todos os que foram a zero.

Liquidez imaginária. Supor que você conseguiria comprar ou vender qualquer quantia ao preço dos seus dados esquece que a sua própria ordem mexe no mercado, e que alguns tokens quase não têm compradores justo quando você precisa.

Passado não é futuro

Nem uma aprovação limpa é uma promessa. O próximo passo é aplicar a mesma regra daqui para frente, em simulação e com preços ao vivo, sem mudá-la, e ver se ela se sustenta. Se depois você passar para dinheiro real, conte com um resultado pior, e lembre que operar com criptomoedas pode fazer você perder todo o capital que colocar.

Como o Bajamar testa as próprias estratégias

O Bajamar, um robô de trading grátis para a Solana, escreve cada regra antes de ver os dados e não mexe nela pelo caminho. Cada estratégia é comparada com ficar com SOL nas mesmas datas e com ela mesma entrando ao acaso, em 300 versões.

Uma estratégia só tem vantagem demonstrada com pelo menos 30 operações fechadas por ela mesma em 10 dias ou mais, se for melhor que 95 de cada 100 versões ao acaso, ganhar de ficar com SOL e deixar, em média, algo acima de zero depois dos custos, com a sua margem de erro dia a dia e contando tudo o que foi testado na sua família. Para passar para dinheiro real, ainda precisa ganhar de emprestar sem mais. Os testes já encerrados usam preços de 2024 a 2026, com custos incluídos. Até hoje, 16 regras de estratégia foram submetidas a testes formais, e nenhuma cumpriu o seu critério de aprovação.

Perguntas frequentes

O que é um bom resultado de backtest?

Não é um número grande. Um bom resultado vem de uma regra escrita antes do teste, bate o acaso e o não fazer nada depois dos custos, se sustenta com operações suficientes e sobrevive em dados com os quais não foi construída. Mesmo assim, é motivo para continuar testando, não uma promessa.

Quantas operações um backtest precisa ter?

Não existe número mágico, mas um punhado nunca basta: pelo menos dezenas, em períodos diferentes. O Bajamar, por exemplo, não dá uma vantagem como demonstrada com menos de 30 operações em 10 dias ou mais.

O que é sobreajuste no trading?

É ajustar tanto uma estratégia aos dados do passado que ela aprende o ruído, e não algo real. Aparece como uma estratégia excelente nos dados em que foi construída e que desmorona com dados novos.

Por que comparar uma estratégia com entradas ao acaso?

Porque muitos resultados vêm da direção do mercado, e não do sinal. Se entradas ao acaso com as mesmas saídas se saem igualmente bem, o sinal não acrescenta nada.

Um bom backtest quer dizer que a estratégia vai dar lucro?

Não. Um backtest mostra o que teria acontecido num passado específico. Os mercados mudam, os custos e a liquidez reais costumam ser piores, e resultados passados, medidos ou simulados, não antecipam os futuros.

Um único app, sem Node nem terminal

O app de desktop para Mac e Windows leva o bot dentro: clique duplo, carteira e a testar em simulação. Ajudar a rede é você quem decide.

Baixar o app

Mais guias