A los cuatro años, su madre dejó a su padre y se trasladó a Detroit con sus hijos adoptando de nuevo su apellido de soltera y cambiando a Morris el de sus hijos, siendo Stevland Hardaway Morris su nombre a efectos legales desde entonces.