En Cádiz estuvo sin embargo apenas dos años, porque pasó a Isla Cristina –su casa se conserva todavía en La Redondela— desde donde, tras los graves acontecimientos del golpe de estado de 1866, cuando su casa fue allanada cuatro veces, se le había dictado auto de prisión y busca y captura y se habían practicado varios registros, optó por exiliarse a Portugal donde, tras dos periodos de detención, presidió la Junta de Exiliados Españoles; allí rechazó varias aproximaciones del duque de Montpensier.