Томас Раттрей, 22-й лэрд Раттрей (1750—1773), и Джон Раттрей, 23-й лэрд Раттрей (ум. 1779), скончались, не оставив наследников, и недвижимость потом была передана их двоюродному брату, достопочтенному Джеймсу Клерку Раттрею (1763—1831), заместителя шерифа Эдинбурга, который стал 24-м лэрдом Раттрея. Джеймс Кларк Раттрей, 26-й лэрд Раттрей (1832—1910), был известным военным, дослужился до звания генерал-лейтенанта, и в 1897 году стал кавалером ордена Бани. Он принимал участие в Крымской войне и в подавлении индийского восстания 1857 года.