A chegada do Metatrader 5 aoBrasil e mais um passo na popularizar dos trading systems. Entretanto, oinvestidor precisa tomar o cuidado de nao ser seduzido pelo "canto" da otimizacaoque podera fornecer uma calibragem que apenas aprendeu o passado (overfitting). Uma tentativa simples de avaliar a robustez do seusistema e a realizacao de pequenas alteracoes nos parametros dotrading system, rodar o backtest e verificar qual foi o impacto sobre o resultado da estrategia.Por exemplo, se o desempenho de um sistema baseado em um determinado indicador sofre forte impacto ao mudar levemente o seu periodo em relacao aos valores otimos encontrados, tome cuidado com a aplicacao dessa estrategia em operacoes reais. Isso nao fica limitado apenas aos indicadores, suponha que um dado trading system/expert advisor foi construido para o contrato futuro de Ibovespa e apos passar pelo processo de otimizacao indica como melhor stop de objetivo o nivel de 150 pontos, se ao alterar esse valor para 160 pontos o resultado cai drasticamente e importante que o investidor faca uma varredura sobre a lista de operacoes para tentar entender o porque disso.Conforme discutido em artigo anterior, podemos utilizar o metodo Walk- Forward que consiste em dividir a serie historica dos precos em uma parcela (in sample - IS) para treinar o sistema e em seguida testar os parametros otimizados no restante da serie (out of sample - OOS) ainda desconhecido pelo trading system. Esse processo pode ser repetido sobre segmentos subsequentes como mostra a animacao.Apos a otimizacao o trader ainda podera fazer uma simulacao de Monte Carlo que gerara um conjunto de possiveis curvas de resultados mediante o embaralhamento da ordenacao original das operacoes geradas no "backtest". A partir disso, temos um quadro muito mais abrangente de possibilidades e a probabilidade das ocorrencias.Para exemplificar tudo isso vamos construir um sistema simples sem a preocupacao se o mesmo e rentavel:Entrada na compra: Quando oIFR(14) cruza para cima o nivel de 50%.Saida da compra: Quando o fechamento da barracruza para baixo o menor valor atingido nas dez barras anterioresA estrategia foi aplicada ao diario de Sid Nacional ON (CSNA3) entre janeiro de 2006 a outubro de 2015.A otimizacao walk-forward foi executada para encontrar a calibracao que apresentava o maior Recover Factor (lucro liquido dividido pelo maximo drawdown) a partir das mudancas no periodo do IFR e no nivel de rompimento. Observe que a faixa otima de calibragem foi estavel. A partir da tabela acima foi rodado o backtest com a calibracao: IFR(24) e 52 de nivel.O resultado superou com folga o Buy & Hold e para avaliar se a otimizacao nao causou um excesso de overfitting foram realizadas 5000 simulacoes de Monte Carlo a partir do embaralhamento das 44 operacoes resultantes do backtest otimizado.Podemos observar que em 10% das combinacoes a estrategia foi a bancarrota, ou seja, provavelmente as sequencias de perdas foram ordenadas antes das principais operacoes de ganhos ("worst case scenario"). Por outro lado, os 25% melhores resultados superaram a sequencia real dos acontecimentos. Diante desses dados o investidor/trader tem mais condicoes de avaliar os riscos de sua estrategia e se a mesma e