ב-5 באפריל 1849 נכנס הצבא האוסטרי לפארמה, לאחר שהביס את צבא סרדיניה במלחמת העצמאות האיטלקית הראשונה, והחזיר את קרלו לשלטון. ב-17 במאי אותה שנה התפטר קרלו מתפקידו ופרש לאחוזתו בסקסוניה, ובנו קרלו השלישי, דוכס פארמה עלה לשלטון במקומו.