Вы не с того конца к ситуации подходите и не те проблемы определяете как приоритетные. У Вас есть семья - Вы и муж, есть совместное жильё. Если отношения нормальные, никто единолично не решает, кого и насколько можно позвать в гости. Такими темпами муж разрешит пожить другу, попавшему  в сложную ситуацию. Вам не с золовкой и племянницей разговаривать нужно, а с мужем.