Senere i åttiårskrigen gikk de With inn i orlogsmarinen igjen, og deltok i slaget ved the Downs i 1639, under Maarten Tromps kommando. De With var nå viseadmiral, men var fortsatt skuffet over å ikke få stillingen som øverstkommanderende. Tromp fikk status som folkehelt i Nederland etter å ha knust den spanske flåten, noe som gjorde de With svært misunnelig.