Aksi ble ikke bosatt før på 1700-tallet. Øya lå under Haljava herregård på fastlandet. Godseieren gav øyboerne etternavnet Aksberg. En vanlig misforståelse har vært at øyboerne var estlandssvensker.