Да, вполне и это может произойти, зависит от ситуации и от контекста. Когда-то моя подруга обиделась на словосочетание "маленькая женщина", она была еще молода, ее назвали так в контексте, что она всё продумала и хапнула себе мальчика прекрасного, как бы лучше, чем она, так сказала про нее её будущая свекровь.