V této budově zůstala knihovna až do roku 1920, kdy byla pro její potřeby odkoupena budova na Kosančićově venci. Na začátku dubnové války, kdy Jugoslávii obsadila vojska fašistických zemí, však byla tato budova při bombardování zničena. Knihovna tak přišla o rozsáhlý knižní fond, který obsahoval i středověké rukopisy z 12.–17. století, stejně jako spisy z dob turecké správy Balkánu.