Након што су југословенски партизани стекли контролу над земљом крајем Другог свјетског рата, нова комунистичка власт конфисковала је дворац 1944. године, а породица грофа Јакоба из Елца била је приморана да напусти Вуковар. Вратио се 1990 из Елтвила на Рајни у Хрватску и постао заступник Хрватског сабора. Дворац Елц је претрпио велику штету током борби за Вуковар у рату у Хрватској.