瑟楼位于山脚下的平地，外墙为青砖，顶层为木质结构，建筑风格为欧洲式样。据说圣若瑟楼部分墙砖取自圆明园遗址。圣若瑟楼坐北朝南，中央为四层的主楼，主楼东西为三层带阁楼的翼楼，主楼和翼楼平面构成了一个十字。主楼正立面（南立面）三层两个窗户之间正中有一块纵向的汉白玉石匾，从上到下刻有“上义师范学校”六字，石匾上方横有三块四角内缺的方形汉白玉石匾，内各有一花体字母。主楼正立面顶部三角山花内安装有一块大钟表。在两个翼楼南侧中间，分别接有附楼。圣若瑟楼有东门、西门、南门，南门为正门。圣若瑟楼在黑山扈17号院（中国人民