Понятно, что свекровь там хозяйка, но правила приличия и взаимоуважения еще никто не отменял. Нужно поговорить с  ней на эту тему- возможно, она даже не догадывается, что напрягает вас такими посещениями. Деликатно попросить предупреждать о визитах. В зависимости от реакции на разговор, делать выводы. Если она упрется рогом, что она там хозяйка- увы, она права, и ничего вы сделать не сможете. Т.к. она там действительно хозяйка и плевать хотела на ваши желания. Если же она человек адекватный, то все поймет и что-то изменит. И еще вы должны быть готовы к тому, что она всегда может вернуться в свою квартиру насовсем. Тогда решене одно- вы в свою однушку, а брат мужа в эту треху с мамой.