Casado en 1856, con Anna Maria Waite, tendrá un hijo, J.F.Bailey, que será director del jardín botánico de Brisbane, y luego del de Adelaida.