Nacido el 11 de abril de 1931 en Taito, Tokio, Sugiyama desarrolló una pasión por la música clásica en una temprana edad gracias a sus padres.