Landsbyen Lastovo ligger i de bratte skrentene ovenfor sjøen, noe som er uvanlig sammenlignet med de andre adriatiske øyene, der landsbyene oftest ligger ved sjøen. Andre landsbyer på øya er blant annet Ubli (også kalt Sveti Petar), Lučica, Zaklopatica, Skrivena Luka og Pasadur.