Nato a Praga il 21 dicembre 1748, la carriera militare di Kollowrat iniziò nel 1766 quando aderì all'Imperiale e regio Esercito austro-ungarico. Due anni più tardi egli era già capitano. Nel 1778-1779 egli combatté contro i prussiani nella Guerra di successione bavarese e ricevette la promozione al rango di Maggiore. Nel 1786 divenne Luogotenente-Colonnello. Nel corso della Guerra austro-turca venne elevato al rango di Colonnello al comando del 19º reggimento di fanteria "Alvinczi" dopo essere stato ferito a Belgrado, e divenne Maggiore Generale il 9 ottobre 1789.