"Kiss Me, Baby" contiene una paleta instrumental expandida de tres guitarras, dos bajos, dos pianos, dos saxofones y percusión, cuerno inglés y corno francés.