I oktober 1944 kjempet han med sitt korps i Litauen men klarte ikke å hindre de fremrykkende sovjetiske styrker fra å nå Østersjøen, og dermed kunne de danne Kurlandslommen. Gollnicks korps trakk seg tilbake til havnebyen Memel. Der ble de beleiret. Memel ble betraktet som en festning og Gollnick festningskommandant.