Кто кого пугать своим присутствием будет: он их или они его? Не понимаю проблемы: ну, сестра с мужем и детьми, и что? Они не знают, что вы сексом занимаетесь? Он не знает, что другие люди могут предположить, что он сексом может заниматься? Ему страшно, что его заподозрят в сексе именно с вами? Он боится детей? Он боится чужих людей? Он мизантроп?