Su fundación es atribuida a un obispo de Palencia del siglo VI llamado Toribio,que se retiró junto con algunos de sus acólitos para seguir una vida de acuerdo con la regla benedictina.