Ненене, печальбеда.
Вы с блокировкой вытащили KeySet, т.е. с блокировкой прочли final-ссылку. Порыв благой, но зачем?
А его чтение будете производить без синхронизации. И у вас все взорвется.