Около 1342/3 година Стефан Душан, възползвайки се от Византийската гражданска война, нахлува в Западна Македония и завладява голяма част заедно с Костурско, включвайки го в силното по това време Душаново царство. В 1350 година сръбското владеене на Костур е потвърдено в Солун от договора между Стефан Душан и император Йоан VI Кантакузин. След смъртта на Душан, Костур е седалище на Симеон Урош. По-късно градът е във владенията на епирския владетел Тома II Комнин, за кратък период Костур е владение и на Радослав Хлапен. След това Костур влиза в Княжество Музака при Теодор II Музака, който е в спор за града с крал Марко. Овладян е от османците в средата на 80-те години.