refactory to include crawler feature tests

refatora para incluir testes funcionais para o crawler
change structure of the project to introduce crawler acceptance tests

muda a estrutura do projeto para introduzir testes de aceitação para o
crawler