Pero las más peligrosas fueron sus disputas con el emperador Federico II, que lo desterró en 1236.