W pobliżu Bystrampola, w dniu 30 lipca 1863 roku doszło do bitwy powstańców Antoniego Mackiewicza z oddziałami carskimi. W bitwie brał udział Władysław Bystram (1839–1918), syn Karola juniora. Powstańcy również stacjonowali w pałacu Bystramów. Za udział Władysława w powstaniu styczniowym Karol został w 1863 roku uwięziony przez władze carskie, a wszystkie jego majątki zostały objęte sekwestrem. Po kilku latach Bystramowie odzyskali swoją własność, którą po śmierci Karola odziedziczył Władysław. Podzielił on majątek między swoich 4 synów. Bystrampol odziedziczył najmłodszy z nich Tadeusz (1886–1935). W 1900 roku majątek liczył 3824 dziesięcin ziemi, a tym 872 dziesięciny lasu. Władze litewskie, w wyniku reformy rolnej w 1925 roku skonfiskowały lasy należące do majątku, a folwark rozparcelowano, pozostawiając jedynie 84 ha przy Bystrampolu. Do 1940 roku właścicielami Bystrampolu były małoletni synowie Tadeusza: Aleksander (1923–2001) i Eugeniusz (1929–1995), którzy w 1945 roku wyemigrowali na Zachód.