A kastélyt 1956 viharos napjaiban is erődként használták a szovjetek ellen. A Vörösvári útról orosz harckocsi lőtte az épületet. A helyi legenda szerint egy hadnagy tartott ki itt egy szakasznyi katonával, akik közül háromnak sikerült megmenekülnie és nyugat felé átlépnie a határt. 1956 őszén a kastélyba szabadságharcos felkelők egy csoportja „fészkelte be magát” és közel tíz napon át sikeres rajtaütéseket hajtottak végre a Bécsi úton beáramló szovjet katonákon. A tűzszerészek még az 1960-as években is találtak lőszereket a környéken. Az 1956-os eseményeket megörökítő emléktábla a kastélyudvar kapuja mellett látható, a következő felirattal: „Az 1956 november 4. és 8.-a között a kastély környékén harcolt és elesett hősök emlékére állíttatta az 56-os Emlékbizottság”.