Nach der jahrhundertelangen osmanischen Herrschaft wurde Vitez, wie auch das restliche bosnisch-herzegowinische Gebiet, 1878 durch Österreich-Ungarn besetzt und 1908 schließlich annektiert. Nach dem Ende des Ersten Weltkrieges wurde Vitez Teil des SHS-Staates, dem späteren Königreich Jugoslawien. In der Zeit des Zweiten Weltkrieges 1941–1945 entstand durch die damaligen Kriegsgesetze des faschistischen „Unabhängigen Staates Kroatien“ der Kreis Vitez. In diesen Jahren betrieben die Ustaša wenige Kilometer südlich von Vitez das KZ Kruščica.