Isabella Augusta war die jüngste Tochter einer Familie der anglo-irischen Gentry. Ihre Mutter, Frances Barry, war verwandt mit Standish O'Grady, 1. Viscount Guillamore. Ihr Vater, Dudley Persse, war ein direkter Nachfahr von Dudley Persse (1625–1699), einem anglikanischen Geistlichen aus dem 17. Jahrhundert. Durch ihre Schwester Adelaide war sie die Tante von Sir Hugh Lane. Das Anwesen in Roxborough umfasste 24 km², wurde aber während des irischen Bürgerkriegs niedergebrannt. Sie wurde zu Hause privat unterrichtet und durch das Kindermädchen der Familie – eine einheimische (katholische) Irin, die ihr die irische Geschichte und den irischen Mythos nahebrachte – stark geprägt. Diese frühe Berührung mit der irischen Literatur und Poesie hatte umso mehr Einfluss auf sie, als das Haus keine Bibliothek besaß und ihre Mutter, eine strenge Protestantin, ihr bis zum 18. Lebensjahr verboten hatte, Geschichten oder Romane zu lesen.