Если человек симпатичен, то его грамотность на симпатию не повлияет. Сами подумайте, какой-нибудь ваш знакомый скажет: "Не хочу с тобой общаться, потому что ты плохо рисуешь, не играешь на пианино, медленно бегаешь, не помнишь что-то из химии или физики", как бы вы отреагировали? Почему-то многие считают, что все должны быть профи именно в языке. Наверняка у других людей найдутся таланты или способности, которыми вы не владеете. По-моему, вам сам человек не очень симпатичен, и вы просто ищите предлог, чтобы прекратить общение.