С 1807 по 1813 год Д’Абовиль служил в Испании и Португалии, участвовал во множестве сражений, став одним из самых заметных французских артиллерийских начальников на Пиренейском полуострове. Участвовал в штурмах и осадах городов, разрушал огнём мосты через реки при отступлении армии, а при наступлении, наоборот, прикрывал огнём своих батарей пехоту на переправе. В 1809 году получил степень Командора ордена Почётного легиона, в том же году был ранен. В 1810 году заменил погибшего генерала Сенармона, выдающегося артиллериста, французского героя битвы при Фридланде, в качестве командующего артиллерией при осаде Кадиса, последнего города, остававшегося под контролем испанцев, но взять город так и не удалось. С 1812 года — барон империи. В 1813 году, при общем отступлении из Испании, в неудачном для французов сражении при Витории, которое закончилось бегством армии, генерал Д’Абовиль потерял значительную часть пушек и был отправлен в отпуск.