Потеряв покровителя, ван Кеппель снова уехал на родину. Там он стал полковником карабинеров, губернатором Хертогенбоса и заместителем лесничего Голландии. В Войне за испанское наследство граф командовал кавалерией в чине генерала, подчиняясь Джону Черчиллю (к тому времени — герцогу Мальборо). В 1703 году он возглавлял конвой, доставивший припасы для союзной армии в Маастрихт. Перед началом кампании 1704 года Мальборо остановился на время в доме ван Кеппеля, что говорит о хороших отношениях между двумя военачальниками. Албемарл участвовал в боевых действиях в Брабанте в 1705 году и предлагал, в отличие от других генералов-голландцев, энергично преследовать разбитого врага. В 1706 году он сражался при Рамильи, в 1708 году был в составе армии, осаждавшей Лилль, и во главе тридцати эскадронов кавалерии сопровождал конвой с припасами, которому угрожало нападение противника. В 1709 году граф был назначен губернатором Турне. В 1712 году, уже после отставки Черчилля, ван Кеппель сражался с французами при Денене под началом Евгения Савойского; его войска были разгромлены, а сам граф попал в плен, но вскоре получил свободу.