In ihre Fußstapfen trat die einflussreiche und begüterte Familie Hendl, der 1697 von Kaiser Leopold die Grafenwürde verliehen wurde. Ursprünglich nicht von Adel, waren die Hendl Burgmannen und Verwalter auf den Burgen Fernstein, Ehrenberg und Neustarkenberg gewesen und nachweislich seit 1474 Herren auf Schloss Goldrain. Die Hendls bewohnten das Schloss jedoch nicht selbst und tätigten auch keine nennenswerten Investitionen. Nach den Tiroler Freiheitskriegen, bei denen sich die Hendls finanziell stark engagierten, konnten sie ihre wirtschaftliche Stärke nicht mehr aufrechterhalten und boten das Schloss zum Verkauf an. Eine Versteigerung ging zwar ohne Gebot über die Bühne, aber einige Tage später meldeten sich die Brüder Joseph und Mathias Nischler, Bauern aus der unmittelbaren Nachbarschaft, auf Juval, und erwarben die ganze Liegenschaft am 15. September 1815 um 13.151 Gulden. Sie veräußerten das Juvalgut 1823 an das Ehepaar Martin Torggler und Karlina Siller weiter, die es vier Jahre später in einem Konkursverfahren wieder verloren, in welchem Joseph Blaas aus Latsch für 6.719 Gulden den Zuschlag erhielt. Die Burg diente nun der Bauernfamilie mit ihren zwei Söhnen eine Zeitlang als Stall, Stadel und Wohnung. 1839 wurde bei den Behörden um eine Hofteilung angesucht, der stattgegeben wurde. Zwischen 1880 und 1890 wurden hinter dem Schloss zwei Bauerngehöfte erbaut, in die die Familien umzogen und bei deren Errichtung hauptsächlich das Mauerwerk des Schlosses verwendet wurde.