Arias Pardo falleció en la ciudad de Toledo el 13 de enero de 1561, sucediéndole en el mayorazgo su primogénito, Juan Pardo de Tavera.