Ну правильно Вам советуют, так и скажите честно, что мол Ваши жилищные условия позволяют Вам разместить у себя всего одного гостя, второго человека просто некуда разместить. И предложите брату варианты - либо он приезжает один и останавливается у Вас, либо Вы находите ему и девушке гостиницу, квартиру, комнату для съема - в зависимости от их финансовых возможностей.