Cuộc đời lúc ban đầu
Agnes được sinh ra là Agnes Smyth Powell trong một gia đình có 10 người con, là người con thứ chín và con gái thứ ba. Cha của bà, Mục sư Baden Powell, là giáo sư toán học tại Đại học Oxford. Mẹ của bà tên là Henrietta Grace Smyth là người vợ thứ ba của Mục sư Baden Powell (hai người vợ đầu đã mất) và cũng là một nghệ nhân và người chơi nhạc thiên tài. Khi Agnes mới hai tuổi, Mục sự Baden Powell qua đời. Để vinh danh ông sau khi mất, gia đình ông đã thêm tên của ông vào họ của gia đình và kể từ đó họ của gia đình được biết đến là Baden-Powell.