Han hadde også et voldsomt kontrollbehov som nærmet seg paranoia. Ifølge ektefellen Ronnie Spector (vokalist i The Ronettes – skilt i 1974) forlangte han eksempelvis at hun skulle kjøre med en dukke i passasjersetet i bilen som lignet på ham, «slik at ingen skulle innbille seg noe». Selv sa han i et intervju med London-avisen The Daily Telegraph i 2003, hans første på 25 år, at han ofte måtte kjempe mot (djevler i min plagede sjel). Han bekymret seg for hvilken innflytelse han hadde på datteren Nicole (født 1982) og at hun skulle bli tiltrukket av menn som ham selv. Han karakteriserte seg ikke som gal, men ikke frisk nok til å fungere i samfunnet, og derfor trakk seg unna dette. Han mente selv han led av en bipolar lidelse.