I 1919-1920 ble "Varde" på Bruhagen på Averøya bygd, og amtsskolen/fylkesskolen som den senere ble kalt, ble flyttet dit. I 1940 ble Varde midlertidig tatt i bruk som fangeleir for tyske soldater, men etter kapitulasjonen ble fangene satt fri. Resten av krigsårene ble Varde brukt som alders- og sykehjem, samtidig som at det ble drevet fylkesskole der.