在第四次十字军东征中君士坦丁堡受到劫掠和破坏，此后开始衰落。天主教十字军建立起拉丁帝国以取代东正教的拜占庭帝国，君士坦丁堡也成为了这一帝国的中心。然而拉丁帝国存在时间不长，拜占庭帝国很快于1261年重建起来，但其实力大不如前。君士坦丁堡的教堂、城防和基础设施失修荒废，其人口由8世纪时的50万下降至此时的3万5千。