冯·席拉赫与阿道夫·希特勒的摄影师海因里希·霍夫曼的女儿亨利埃特·霍夫曼在慕尼黑结婚。从1933年到1942年两人共有四个孩子，其中1942年出生的理查德·冯·席拉赫成为一名知名的作家和汉学家。1950年7月20日两人在慕尼黑离婚。律师和作家费迪南·冯·席拉赫、散文家阿里亚德内·冯·席拉赫和作家贝内迪克特·韦尔斯是他的孙子。
政治.1925年巴尔杜尔·冯·席拉赫17岁时首次遇到希特勒，成为希特勒的热烈追随者。他成年后就加入了纳粹党。他入大学读德国学和艺术史，成为纳粹德国学生联盟