Dicha fortaleza era feudo de don Fernán Ruiz de Castro, señor de Lemos, pero al parecer fue donada por el rey Sancho IV y su esposa María de Molina al infante don Felipe.