Tras la muerte del fundador del castillo Čeněk de Vartenberk, el edificio pasó a pertenecer al rey Wenceslao IV. En el año 1398, Ota de Bergov consiguió el castillo y todas las tierras señoriales, que fue heredado por su hijo Ota quien, católico, fue perseguido por las tropas husitas, que asediaron el castillo en el año 1424. En el año 1455, el hijo de Ota, Jan, lo vendió junto todas las tierras señoriales al señor de las tierras colindantes y del castillo de Kost, Jan Zajíc de Hamburk.