En sus inicios, Poy era un jugador muy cuestionado por buena parte de los hinchas auriazules, y estuvo a punto de dejar el club en 1969 cuando el Club Atlético Los Andes (equipo que se encontraba en Primera División en aquel año y era dirigido por Ángel Tulio Zof) quiso contratarlo.