Han gjorde Huntingdonshire til sitt landlige bosted hele livet, boende ved Ramsey om somrene og i Hinchinbrook. Han reparerte, om ikke bygget, herskapshuset ved Ramsey. Mark Noble har kommentert at han hadde hørt at huset ved Ramsey var kun en jakthytte, men ble ombygd av Henry til en bolig. Han bygde også Hinchingbrooke House ved et nonnekloster, og ved buevinduene plasserte han sin families våpenskjold sammen med dem som han var alliert med.