Po roce 1925 se stáhl z politického života, i vzhledem k věku. Jeho syn Karel Josef padl roku 1943 v řadách Wehrmachtu v bitvě u Stalingradu.