С 1504 года имение принадлежало князю Василию Глинскому. Вероятно именно в Белавичах родилась его дочь Елена Глинская, мать Ивана Грозного. В 1508 году после подавления мятежа Глинских Василий Глинский бежал в Москву, а все имения в ВКЛ были у него отобраны. В 1509 году король Сигизмунд I передал имение Семёну Чарторыйскому, после брака дочери Семёна Александры Чарторыйской с Василием Тышкевичем Белавичи перешли к нему. В 1598 году имение перешло в собственность канцлера Льва Сапеги.