Изгнанный в 1815 году из Франции, Кольбер вскоре был возвращён и назначен генерал-инспектором кавалерии. В 1834 году состоял при герцоге Немурском во время 1-й экспедиции в Алжир.