Estuvo casado con Juana Martínez de Cuéllar, de quien tuvo cuatro hijos: Juan, Ana María, Jerónima y Estefanía; además, Isaac tuvo un hijo natural llamado Pablo, nacido en 1568 que fue platero de profesión.