Baron Adelswärd , Sweriges och NorgeS ministeri