Debido a que al mánager del grupo, Andrew Loog Oldham, no le parecía que luciera bien a efectos publicitarios, Stewart fue apartado como miembro oficial pero continuaría hasta su muerte como pianista y "road manager" de la banda, razón por la que es conocido como "el sexto Stone".