Fra minst 1595 til slutten av 1700-tallet var Linga Holm ubebodd og brukt til sesongbeite. Selv om det for tiden er ubebodd, ble det registrert en husstand på seks i 1841, men var helt forlatt ved folketellingen i 1882.