Bij de verkiezing voor de opvolging van keizer Hendrik VII in 1313, koos hij de zijde van Frederik van Habsburg, zijn schoonbroer ten slotte, tégen de kandidatuur van keizer Lodewijk de Beier. De rivaliteit tussen beiden werd hoog oplopend en zou beslecht worden in de Slag bij Mühldorf in 1322. Ferry IV, aan de zijde van de verliezende Oostenrijkse partij, geraakte hierbij gevangen. Koning Karel IV van Frankrijk bemiddelde voor zijn vrijlating, mits hij beloofde zich niet meer te mengen in aangelegenheden van het Heilige Roomse Rijk. Dit versterkte de reeds begonnen afhankelijkheid van Lotharingen tegenover Frankrijk.