Johan Jørgen Tandberg ble gift med Marie Theodora Frølich den 28. oktober 1847 i Fredrikshald i Østfold. De fikk elleve barn mellom 1848 og 1870. Han var far til Jens Frølich Tandberg som ble biskop i Oslo bispedømme.