Estuvo casado con Elvira Lavalleja, hija de Juan Antonio Lavalleja, y en 1856 mandó a construir la Quinta Calzadilla, una muy lujosa casa veraniega en el Tigre, que aún hoy se conserva en la calle Liniers 723 de esa ciudad.