Da tyskerne invaderte Norge i 1940, fulgte Keilhau regjeringen til London. Han var i Molde da byen ble bombet i slutten av april. Her tok han ingen sjanser, men snudde skiluen bak frem under flyangrep, så ikke tyskerne skulle tro det var en militærlue. Han overtalte også forpakteren på eiendommen til å sage ned flaggstangen, så ikke tyske flygere skulle ta den for en signalmast.