En octubre de 1754, Horatio se casa con Elizabeth Phillips y en 1758 nace su hijo Robert.