Se llamó "Torralba de Abajo", porque tiene una torre blanca muy antigua y porque es probable que hubiese dos núcleos de población, el de Abajo y otro de Arriba que se localiza en un lugar más elevado.