Особенного расцвета «академия» достигла при Кароле Станиславе Радзивилле (1734—1790) по прозвищу «Пане Коханку», который владел Сморгонью в 1762—90 годах. Он назначил руководителем академии «барона» литовских цыган Яна Мартинкевича, который жил в Мире. Тот набрал группу из 20 цыган, которые жили и работали в школе. В период расцвета в «академии» дрессировали одновременно до 10 медведей и несколько обезьян. Обезьян закупал и присылал князь, а медведей доставляли из местных лесов, привозили из Жупранской и Налибокской пущ. Помимо собственных воспитанников, на обучение принимались медведи и от посторонних лиц, которые должны были заплатить за работу, питание и проживание дрессировщика. После смерти князя, и вхождения белорусских земель в состав Российской империи школа постепенно приходит в упадок. О «медвежьей академии» в своих мемуарах упоминали многие участники войны 1812 года, которым довелось побывать в Сморгони.