Мы все жертвы каких-то условностей. Отказывать нормально. Если вы чего-то не хотите, значит у вас есть на то причины и не надо оправдываться. Нет и всё. А уж квартирный вопрос: пустите и потом не выгоните. Так что лучше не начинать.