Den første kjente eieren av Vanås var væpneren Eskidl Aagesen i 1440. I slutningen av samme århundre overgikk gården til slekten Brahe. Godset hadde på dette tidspunkt et fast stenhus omringet av vann.