Un aspetto che ha sempre condizionato fortemente la storia di Pescopagano è la elevata sismicità dell'area in cui ricade il suo territorio. I terremoti storicamente più rilevanti furono quello del 15 gennaio 1466, quello dell'8 settembre 1694 (che distrusse quasi interamente l'abitato e fece rimaner sepolte sotto le macerie più di seicento persone) e quello del 23 novembre 1980 (che in paese provocò una ventina di vittime).