Det første slavehuset ble bygget i 1536 av portugisere. Etter den franske erobringen i 1677 ble slavehandelen besørget av franske handelshus fra Bordeaux og Nantes – slavehandelen var i stor grad grunnlaget for Nantes' velstand på 1700-tallet. Andre europeere, blant annet nederlendere, opererte også fra øya. Slavene som ble eksportert fra Gorée ble i stor grad sendt til Haiti i fransk Vest-India, til Louisiana, til spanske kolonier som Cuba og til portugisiske kolonier i Brasil (noen av disse var opprinnelig grunnlagt av nederlendere). Som følge av dette er det relativt få engelsktalende afroamerikanere som kan spore sine røtter til Gorée.