Sir Peter Elsworthy hade en stor familj,