Smith respetaba y estaba influenciado por muchos artistas, incluyendo The Kinks, The Saints, The Clash, Lou Reed, The Velvet Underground, Elvis Costello, Smokey Robinson, Hank Williams, Kiss, Led Zeppelin, Bauhaus, Television, Belle and Sebastian, Quasi, Radiohead, John Doe, Stevie Wonder, Sam Coomes, Nico, Bob Dylan, Neil Young, Motown y la música flamenca, AC/DC, Scorpions, and Modest Mouse.