Villacarrillo desde su origen perteneció en lo administrativo, que no en lo eclesiástico, al señorío de la mitra toledana sobre el llamado Adelantamiento de Cazorla.