El edificio originario del museo es un antiguo convento de frailes dominicos, construido en la falda del monte Urgull a mediados del siglo XVI gracias al mecenazgo del noble guipuzcoano Alonso de Idiáquez, Secretario de Estado del emperador Carlos V.