La versión que apoya a Orduña como el lugar de nacimiento de Garay dice que el día 7 de octubre de 1535, debido a un fuerte incendio de esta localidad, la familia de Garay debió trasladarse al vecino pueblo de Villalba de Losa, en donde su tío Pedro y su esposa Catalina Uribe y Salazar eran propietarios de otras casas, ya que su palacio en aquella ciudad se había incendiado.