Aluksi tämä "Baabelin vankeus" näytti toimivan, mutta jo 1550-luvun lopulla osa kauppiasta sai paluuluvan takaisin kotikaupunkiinsa. Suurimpana syynä tähän oli se, ettei Helsingistä muodostunut sellaista vastapainoa Tallinnalle, jota siitä alun perin suunniteltiin, koska kauppalaivat eivät päässeet satamaan sen mataluuden takia. Samaan aikaan käytiin myös Venäjän vastaista sotaa.