El bisabuelo de Charles O’Higgins, Seán Duff O’Higgins, tenía el título territorial de Tiarna o señor de Ballinary, y estaba casado con Margaret O’Connor, una dama de la casa real de O’Connor del castillo de Ballintuber, quienes reinaron sobre Irlanda hasta el año 1000.