No obstante, su carrera política terminó en 1795, cuando se vio implicado en la fracasada conspiración de Alejandro Malaspina para derrocar al favorito Manuel Godoy, pues era precisamente el duque de Alba a quien se propuso para sustituirle al frente del gobierno.