Mit dem Bau von Schloss Drachenburg schuf Sarter eine sehr selbstbewusste und weithin sichtbare Demonstration seines Ansehens und Reichtums sowie ein auf die Reichsgründung von 1871 Bezug nehmendes Nationaldenkmal. Er lebte bis zu seinem Tod 1902 in Paris und bewohnte das Schloss nie. Er zahlte für das Gebäude insgesamt 1,8 Mio. Goldmark. Im Schloss findet sich immer noch sein Freiherren-Wappen mit seinem Motto: „Wäge und wage!“ (angelehnt an das Motto des Bankhauses Sal. Oppenheim „Wägen und Wagen“, bei dem er seine Ausbildung gemacht hatte).