Olivier se distinguió en la batalla de Auray en 1364, en la que perdió un ojo y se ganó el nombre de «el Carnicero», por haber ordenado a sus tropas no tomar prisioneros.