Incluso se decía que era atraído sexualmente por las humanas y no por las hembras de chimpancés, como asegura Janet Berger, esposa del primer dueño de Oliver, quien asegura haber tenido que repeler sus avances constantemente.