I 1531 overtok familie Weckerbrod, og i 1605 overga Ewert Weckerbrod godset til sin datter Brita, som hadde giftet seg med Melchior von Helffreich. Heretter ble Vihula i ektemannens slekt i over 200 år. I den store nordiske krig ble bygninger og omgivelser sterkt skadet. I 1810 ble det solgt til Alexander von Schubert. Etter 1. verdenskrig ble Vihula nasjonalisert, men familien Schubert ble værende på godset frem til 1939, hvor de forlot Estland.