Frossard kehrte dann nach Frankreich zurück und wurde dort Mitglied des Befestigungskomitees und dann bis Ende 1858 als Général de division Chef des Geniewesens in Algerien. Im Italienischen Feldzug 1859 war Frossard Chef des Geniewesens der Armee, ließ Casale befestigen und wurde zum Großoffizier der Ehrenlegion und Adjutanten des Kaisers Napoleon III. ernannt. Ab 1867 war er Gouverneur des kaiserlichen Prinzen.