En 1923, cuando Spencer fue enviado al Lejano Oriente como comandante del Pampanga, Wallis se quedó en los Estados Unidos y mantuvo una relación amorosa con el diplomático argentino Felipe Aja Espil.