Ambas tienen un hermano mayor, Trent, una hermana menor, Elizabeth Olsen quien también es actriz, y dos jóvenes hermanastros, Taylor y Jake, del segundo matrimonio de su padre McKenzie.