Uttrykket «nybygger» ble vanligvis ikke brukt i forbindelse med mennesker som ble brakt til koloniene som ufri arbeidskraft, så som slaver (f.eks. i De forente stater), eller fanger (som i New York i 1674-1775 og Australia i 1788-1868).