Se casó en 1865 con Jane Woodhead, hija de una prominente figura del partido conservador de Leeds, con quien tuvo tres hijos.