Надо просто обозначить свои границы, вы имеете на это право. Может, человек ведет себя как-то, что Вас раздражает? Берет вещи без спроса, еще что-то? Так и скажите, и добавьте, что если Ваши условия соблюдаться не будут - вы будете вынуждены попросить гостя уехать.