Gaten har navn etter William Baker (1705–1771), som anla gaten. Opprinnelig var det bolighus i høyere prisklasse langs gaten, men det er nå for det meste næringsbygninger der.