Han døde i 814 etter å ha hersket som keiser i tretten år. Han ble gravlagt i katedralen i den keiserlige hovedstaden Aachen. Han giftet seg minst fire ganger og fikk tre legitime sønner, men kun en av dem overlevde og etterfulgte ham, Ludvig den fromme.