Cuando fueron expulsados los jesuitas en 1767, los "caballeritos de Azcoitia" consiguieron la cesión del colegio de Vergara, en el que fundaron el Real Seminario de Nobles.