Город Авен-сюр-Эльп был основан в XI столетии "Ведриком Ле Барбу" и его сыном "Тьерри", построившими здесь замок. В 1477 году это укрепление было разрушено французским королём Людовиком XI. В 1566 году Авен отошёл под власть Испании и только через 100 лет, в 1659 по условиям Пиренейского мира, был возвращён Франции, после чего вокруг него были вновь построены укрепления по проекту инженера Вобана. В октябре 1793 года, во время битвы при Ваттиньи, в Авене располагались части французской армии под командованием генералов Жубера и Карно. В конце Первой мировой войны, с марта по сентябрь 1918 года, в Авене находилась штаб-квартира командующего германскими войсками фон Гинденбурга. 15 июня 1918 года германский император Вильгельм II на центральной площади Авена принимал парад войск.