Вам просто не очень приятен этот человек. Тем более, что не попросили, а так, как само собой разумеющееся. Тогда не нужно соглашаться. Я многим делаю приятные мне ( и им, конечно) одолжения, но могу и отказать. Причем, угрызений совести не испытываю - хочу, помогу, не хочу - нет. Это нормально.