Han var født i Clydach i Brecknockshire og var sønn av Edward Frere og nevø av John Hookham Frere.