12世纪末（1190年），由法王菲力二世（「奥古斯都」）下令修建，最初是用作监狱与防御性的城堡，边长约90米，四周有城壕，其面积大致相当于今卢浮宫最东端院落的四分之一。当时的罗浮宫堡并不是法国国王的居所，而是被用来存放王室财宝和武器。14世纪，法王查理五世觉得罗浮宫堡比位于塞纳河当中之城岛（西岱岛）的更适合居住，于是搬迁至此。在他之后的法国国王再度搬出罗浮宫，直至1546年，弗朗索瓦一世才成为居住在罗浮宫的第二位国王。弗朗索瓦一世命令建筑师皮埃尔·勒柯按照文艺复兴风格对其加以改建，于1546年至1559