Emmet Walsh var det åttende avc elleve barn til Thomas og Wilhelmenia (née Walsh. I 1906 flyttet familkien fra Beaufort i Sør-Carolina til Savannah i Georgia.