Сразу же после его вокняжения вспыхнуло Смоленское восстание, в котором горожане безуспешно пытались восстановить свою независимость от Великого княжества Литовского. После поражения польского и венгерского войск под Варной 10 ноября 1444 года и гибели старшего брата Казимира, короля польского Владислава III, за которой последовало трёхлетнее междуцарствие, Казимир был выбран в короли польские. Из-за противоборства своих литовских подданных Казимир долго не соглашался принять польскую корону, но, опасаясь того, что поляки изберут другого монарха, в 1447 году согласился и был коронован. Таким образом, личная уния между Королевством Польским и Великим княжеством Литовским была восстановлена. Между тем, королем польским Казимир согласился стать только после того, как польская сторона отказалась от условий Гродненской унии и признала привилей от 17 сентября 1446 года (который устанавливал равноправие ВКЛ и Польши в объединенном государстве). Таким образом, возобновленная уния носила характер личной и была исключительно политической.