De la Gardie ble gift 24. juni 1618 med Ebba Brahe, og paret bosatte seg i Västmanland. Paret fikk tilsammen 14 barn.