Любые основания по недействительности сделок, а также предусмотренные ЖК РФ. Например, отец или сын  не понимал значения своих действий (реально, если стоит на учете или имеются психические нарушения). Забулждение, обман здесь нереальные основания. Но статьи такие имеются... Незаконность обмена - редко. Я не знаю ваш случай, это обсуждать нужно, что у вас могло быть незаконного