Anlässlich eines 1199 durch den Grafen von Champagne ausgerichteten Turniers in Écry-sur-Aisne, auf dem der Wanderprediger Fulko von Neuilly eine mitreißende Ansprache zu dem ein Jahr zuvor durch Papst Innozenz III. ausgerufenen vierten Kreuzzug hielt, entschloss sich Walter gemeinsam mit seinem Bruder Johann das Kreuz zu nehmen. Im Jahr darauf aber heiratete er mit Elvira († nach 1216) die Tochter des Königs Tankred von Sizilien, die nach der Entmachtung ihrer Familie durch Kaiser Heinrich VI. in Frankreich im Exil lebte. Durch sie erhielt Walter einen Anspruch auf das Fürstentum Tarent und die Grafschaft Lecce im Königreich Sizilien, das allerdings von dem noch unmündigen Staufer Friedrich II. regiert wurde.