Det tyngre manuelle arbeidet ble utført av de totalt 150 krigsfangene ved Bud (110 fra Polen og 40 fra Russland), og disse ble innkvartert på to separate bosteder. Lokale innbyggere fra Bud ga ved noen anledninger mat til fangene, og det foregikk ofte byttehandel mellom fanger og Buaværingene, hvor krigsfanger byttet til seg mat og sigaretter i bytte mot utskåret trearbeid. Noe av disse trearbeidene er i dag utstilt ved kystfortet. Selve Bud var under okkupasjonsårene preget av å ha kystfortet så tett på seg, og 36 bolighus, åtte løer og flere sjøhus ble revet til fordel for byggingen av kystfortet. Det store antallet tyskere og krigsfanger på rundt 500 mann utgjorde også en markant motpart til et lite tettsted på rundt 750 innbyggere.