Muy joven se trasladó a Madrid, donde fue discípulo de Alonso Sánchez Coello, con quien colaboró en algunas obras; en 1587, Pantoja contrajo matrimonio y se independizó como pintor al año siguiente, coincidiendo con la muerte de su maestro (1588).