В этот момент вы приняли соединение от первого клиента-мыши. Но потока для его обработки не сделали. В этом причина проблемы, которую вы описали в комментарии.