Etter at korsfarerne erobret Konstantinopel i 1204 ble Bucoleonpalasset foretrukket som offisiell residens for den latinske keiser. Da Mikael III gjenerobret Konstantinopel i 1261 valgte han å etablere seg i Det store palass mer sentralt i byen, men etterfølgeren Andronikos II gjorde Blachernaipalasset til offisiell keiserresidens, som man hadde brukt de siste årene til å sette bedre i stand. Det hadde vist seg at Det store palass var for forfallent.