Según diversos testimonios, Yogui Bhayan poseía supuestamente un marcado gusto por las mujeres, por el que recibió diversas denuncias.