Etter prinsesse Ortruds død i 1918 giftet Albrecht sig for annen gang den 19. september 1920 i Büdingen med Hertha av Ysenburg og Büdingen (1879–1918). I dette ekteskap fødtes en datter, prinsesse Ortrud, som giftet seg med Ernst August IV av Hannover.