En el transcurso del siglo XIX al XX el castillo de Larrés, ya en estado ruinoso, cambió de dueño.