Obwohl Dieter Schwarz schon lange als einer der reichsten Menschen in Deutschland bekannt ist, existieren nur sehr wenige Fotos. Denn der Unternehmer gilt als extrem öffentlichkeitsscheu und lehnt alle Arten von Interviews ab. Auch über das Privatleben gibt es nur wenige Details. Bekannt ist nur, dass er seit 1963 mit Franziska Schwarz verheiratet ist und zwei Töchter hat.