I 1992 ble det avslørt i irske medier at Casey var i et forhold med en kvinne ved navn Annie Murphy. Sammen hadde de fått sønnen Peter, som ble født i Dublin i 1974. Annie Murphy nektet å adoptere barnet sitt og lot Caseys sønn oppdra ved hjelp fra foreldrene.