Como muchas otras poblaciones rurales del Ampurdán, Ultramort comenzó a aumentar su población a lo largo del siglo XVIII y continuó hasta mediados del siglo XIX, tiempo en el que alcanzó los 340 habitantes, más concretamente en 1857.