Scarba er formet er formet som en rund og forholdsvis bratt haug. Den har et areal på 14,74 km², og øyas høyeste punkt er Cruach Scarba som er 449 meter over havet. I klassifiseringssystemet for fjell på De britiske øyer er Cruach Scarba en marilyn. Scarba har ikke hatt fast bosetting siden 1960-tallet, men det ligger noe bebyggelse ved på østsiden av øya.