Butler giftet seg i 1949 med historikeren Lionel Butler, professor i historie, senere rektor av Royal Holloway College (død 1992).