Մանուելի մահը 1180 թ-ի սեպտեմբերի 24-ին թողեց իր 11-ամյա որդուն՝ Ալեքսիոս Բ Կոմնենոսին գահին։ Ալեքսիոսը կառավարելու անընդունակ էր, և նրա փոխարեն ժամանակավորապես կառավարում էր մայրը՝ Մարիա Անտիոքցին և նրան հարող լատինները։ Սակայն այն փաստը, որ փաստացի իշխանությունը գտնվում էր լատինների ձեռքում՝ դժգոհություն էր առաջրացել ժողովրդի մեջ։[89] Վերջիվերջո Ալեքսիոս Ա-ի թոռը՝ Անդրոնիկոս Ա Կոմնեոնսը ապստամբեց Ալեքսիոս դեմ։ Անդրոնիկոսը, ում աջակցում էր բանակը, 1182 թ-ի օգոստոսին գրավեց Կոստանդնուպոլիսը և սկսեց քաղաքի լատինների ջարդ։[90] 1183 թ-ի սեպտեմբերին Անդրոնիկոսը հռչակվեց կայսր։[90]