Родился в семье гауптмана (капитана), ставшего позже генерал-лейтенантом, Александра фон Зейдлиц-Курцбаха; был в семье третьим из десяти детей. Двое его братьев погибли на фронтах Первой мировой войны: старший, Генрих, в 1914 году; младший, Вольфганг, в 1916 во время битвы на реке Сомме, в которой участвовал и Вальтер.