Em 1455, logo após a conquista de Constantinopla, o bairro tinha três categorias de habitantes: mercadores genoveses, venezianos e catalães de passagem; genoveses com cidadania otomana; e gregos, arménios e judeus. A composição da população mudou rapidamente e, de acordo com o censo de 1478, quase metade da população já era então muçulmana. A partir de 1500, fixaram-se em Karaköy muitos judeus sefarditas que escaparam às perseguições da Inquisição em Portugal e Espanha.