En los albores de la Edad Moderna, La Guardia aparece hacia 1340 (testamento) como propiedad de don Lope Díaz de Baeza, también llamado Lope Ruíz de Baeza y Haro, ricohombre de Castilla hijo de don Juan Ruíz de Baeza (señor de La Guardia y Bailén ["Juan Rodríguez de Baeza, señor de Campos e Bailen"] y descendiente de Lope López "el Chico"), quien establece mayorazgo en ella.