军少校詹姆斯·卢瑟福·拉姆利（James Rutherford Lumley，1917–1999），外祖父莱斯利·韦尔（Leslie Weir，1883–1950）也曾在印度服役，军衔为中校。 乔安娜·拉姆利在英格兰肯特长大，她曾在16岁时报考皇家戏剧艺术学院，但未被录取，最后就读女子精修学校露西·克莱顿学院（Lucie Clayton College）。她曾当过三年摄影模特。1969年首次拍摄电视广告，并开始进入演艺界。