Місто було адміністративним центром маєтків абатства, його привілеї підтвердили король Карл IV у 1348 році. Місто було закладено "Локатором" навколо великої прямокутної ринкової площі, подібно до сілезьких міст, включаючи лікарню та укріплення, які повстали з 1357 року і були закінчені у 1380 році. Монастир Броумов залишався міцно прив’язаним до абатства Бржевнов, звідки ченці втекли під час гуситських воєн у 1420 році. Проте, він теж сильно постраждав від нападів гуситів і знову в тридцятилітній війні, після чого він був перебудований у стилі бароко за планами Крістофа Діенценгофера, продовженим його сином, Кіліаном Ігнацієм Діенценхофером . З 1703 по 1810 р. Абатство Легніцьке Поле у Сілезії було філіальним монастирем Брумова.