I 1802 sa Dalzel opp stillingen som guvernør, og returnerte til England for siste gang. Der var han fortsatt aktiv i slavehandelen, som eier av slaveskip til et år etter at slaveriet ble forbudt i Storbritannia gjennom loven i 1807.