Try ssh-add -D