En su palacio lee y escribe en abundancia, pero en sus apariciones públicas se burlaba de la vanidad y falsedad de las clases altas y es expulsado de Madrid por el Real Consejo debido su carácter excéntrico, por lo que volvió a Salamanca.