海岛上的防御工事在1748年1月开始建造，其时年轻的厄伦斯瓦德中校抵达这里来指挥建造工程。厄伦斯瓦德对城堡的设计有两点主要考虑：在每个相连的岛上有独立的防御工事，及在这个综合体的中心建造一个海军船坞。开始时士兵住在各堡垒中的洞窟里，而军官们则住在巴洛克风格的住宅区里。这个雄心勃勃的计划只实施了一半：一个部分以巴黎旺多姆广场为蓝图的巴洛克广场建在大黑岛上。随着工事建筑的进展，越来越多的住房也随之而建，很多是随着新建的城墙而建的。厄伦斯瓦德和其他的一些军官也是热心的艺术家，他们画了一些表现要塞建设时期的生活