I tillegg til klosteret St. Mary de Pré i Leicester skal jarlen ha grunnlagt det cistercianske klosteret i Garendon i 1133, priorinnekloster Fontevraldine ved Nuneaton mellom 1155 og 1160, priorinneklosteret i Luffield og et hospital ved Brackley. Han grunnla kollegiekirken St Mary de Castro tilknyttet klosteret i Leicester en gang rundt 1164, etter å ha undertrykket det i 1139. En gang rundt 1139 grunnla han på nytt kollegiekirken i Wareham som et priorinnekloster av hans kloster i Lyre i Normandie. Hans viktigste normanniske grunnleggelser var priorinneklosteret i Le Désert i skogen ved Breteuil og et betydelig hospital i selve Breteuil. Han var en sjenerøs støtter av benediktinerklosteret i Lyre, det eldste klosterhus i Breteuil.