Su relación con Maximiliano I decayó al proclamar éste la libertad de cultos, en febrero de 1865.