Im Jahr 1885 wurde das Haus durch die Familie Agar-Robartes wieder bezogen. Gemeinsam mit seiner Frau Mary hatte der 2. Baron Robartes zwischen 1879 und 1895 zehn Kinder, von denen nur eines 1884 im Säuglingsalter starb. Durch das Fehlen männlicher Nachkommenschaft in der Familie Agar erbte Thomas Charles 1899 den Titel Viscount Clifden von Leopold Agar-Ellis (1829–1899), dem 5. Viscount Clifden. Die neun verbliebenen Kinder der Agar-Robartes’ wuchsen auf Lanhydrock auf. Der älteste Sohn, Thomas Charles Reginald Agar-Robartes (1880–1915), genannt Tommy, war in der Politik tätig, wo er durch die Liberale Partei unterstützt wurde. Er starb 1915 im Ersten Weltkrieg an einer Schussverletzung in der Schlacht bei Loos und Hulluch (Teil der Herbstschlacht bei La Bassée und Arras), an der er als Captain des I. Battalion Coldstream Guards (Infanterie) teilnahm. Als zweitältester Sohn von Thomas Charles erbte deshalb Francis Gerald Agar-Robartes (1883–1966) im Jahr 1930 die Titel Lord Robartes und Viscount Clifden sowie das Anwesen von Lanhydrock.