Как всегда командуя авангардом 6-го корпуса, Кольбер участвовал в сражении при Туделе (23 ноября 1808 года), в котором была наголову разгромлена испанская армия, а затем активно преследовал британский корпус генерала Джона Мура. По дороге на Асторгу, недалеко от Вильяфранка-дель-Бьерсо, захватил 2000 пленных и несколько пушек. 3 января 1809 года около полудня Кольбер с 6-8 эскадронами прибыл к городку Какабелос, и получил приказ от маршала Сульта немедленно атаковать противника. Командир авангарда потребовал подкреплений, так как считал, что его сил недостаточно. Однако получил в ответ гневное сообщение от Сульта, требовавшего немедленной атаки, и считавшего, что англичане продолжат отступление и не примут бой. Генерал Кольбер был вынужден атаковать арьергард англичан кавалерией, несмотря на многочисленные препятствия. Он выехал вперёд со своим адъютантом, чтобы осмотреть место будущей атаки, но в этот момент притаившийся в засаде стрелок Том Планкет с нарезным штуцером из 95-го полка смертельно ранил Кольбера в голову. Утверждается, что последними его словами были: «Я ещё слишком молод, чтобы умирать, тем не менее моя смерть — это смерть солдата Великой армии, так как умирая я вижу бегство подонков и мучения врагов моей Родины!» Плачущие гусары похоронили Кольбера у обочины, в нескольких шагах от дороги. В течение двух лет весь 3-й гусарский полк, входивший в бригаду Кольбера, будет носить траур в виде чёрной ленты на киверах в память о своём смелом начальнике.