La leyenda sugiere que Sha Jahan fue destronado por su hijo Aurangzeb antes de que la versión negra pudiera ser edificada, y que los restos de mármol negro que pueden hallarse cruzando el río son las bases inconclusas del segundo mausoleo.