Адолф се жени през 1401 г. за Йоланта от Бар († 1421), дъщеря на херцог Роберт I от Бар (1344 – 1411) и Мария Френска (1344 – 1404), дъщеря на френския крал Жан II. С Йоланта от Бар той има син Рупрехт, който умира през 1431 г. Когато нейният брат Едуард III, херцог на Бар, е убит през 1415 г. в битката при Аженкур и херцогството получава далечния му племенник Рене I Анжуйски. Съпругата му умира през 1421 г.