Durante la primera mitad del siglo XVI vivió en ella Pedro Núñez de Herrera, gran bailío de Lora de la Orden de San Juan e hijo natural de Alfonso de Aguilar, que murió en África en 1578 con el rey don Sebastián, cuyo cargo dio nombre a la casa.