Ничего они Вам не сделают, в следующий раз, если он будет, иметь при себе диктофон и четко в конце разговора сказать, что будете обращаться в службу собственной безопасности, с жалобой на злоупотребление. Там очень любят галочки рисовать. Жильцам совет один - дверь никому не открывать, вскрыть ее без их или Вашего согласия могут только по санкции суда или прокурора, в остальных случаях имеете право посылать всех через закрытую дверь.