Hennes far var en bokser kjent som «Battlin' Jack West». Han arbeidet senere som politimann før han startet sitt eget byrå som privatetterforsker. Hennes mor var en tidligere korsett- og motemodell. Familien var protestanter, til tross for at hennes mor angivelig var en jødisk immigrant fra Bayern i Tyskland. Både hennes irske bestemor på farsiden, som var katolikk, og andre katolske slektninger, fordømte karrieren og livsstilen hennes. Det samme gjorde tanten som hjalp til da hun ble født. Enkelte har hevdet at bestefaren hennes på farsiden, John Edwin West, muligens var en afroamerikaner som så hvit ut.