Poco a poco fue desengañándose del liberalismo veinteno, sobre todo al ver la restrictiva amnistía contra los josefinos, pero también por las denuncias que tuvo que afrontar sobre algunos de sus artículos, una de las cuales le valió una condena a un año de prisión; incluso sus enemigos imprimieron un libelo, "Vida, virtudes y milagros del Pobrecito Holgazán", en donde se sacaban a relucir los trapos sucios de su escandalosa vida; en fin, terminó por ser partidario del absolutismo fernandino.