Andress er datter av den tyske diplomaten Rolf Andress, som arbeidet ved ambassaden i Bern, og en sveitsisk mor. Faren forsvant under krigen. Hun har fire søstre og en bror, og snakker flytende tysk, sveitsertysk, fransk, italiensk og engelsk.