Screaming Frog é um rastreador de website que permite a você analisar rápida e facilmente a estrutura e os elementos da página de seu website. Uma das principais métricas que ele rastreia é a "indexabilidade" de cada página. Isto se refere simplesmente a se uma página pode ou não ser encontrada e indexada por rastejadores de mecanismos de busca. Se uma página não for indexável, isso significa que ela pode não ser indexada pelos mecanismos de busca e muito provavelmente não aparecer em nenhum resultado de busca. Há várias razões pelas quais uma página pode não ser indexável, mas a razão mais comum é que a página foi bloqueada por uma etiqueta não-indexável. Em outras palavras, o proprietário do site disse especificamente aos mecanismos de busca para não rastrear aquela página em particular. Páginas não-indexáveis também podem às vezes ser causadas por problemas técnicos, tais como redirecionamentos incorretos ou 404 erros. Independentemente da causa, as páginas que não são indexáveis não contribuirão para o SEO de seu website e devem ser corrigidas o mais rápido possível.