לכבוד נישואיהם העניק אחיו של אלכסנדר - לודוויג השלישי, הדוכס הגדול של הסן, ליוליה את התואר "רוזנת באטנברג", ובשנת 1858 נתן לה את התואר "הנסיכה מבאטנברג", וכעבור שישה חודשים מנישואיהם ילדה את בתה הבכורה. לודוויג השלישי סייע לאלכסנדר לחדש את הקריירה הצבאית שלו בצבא האוסטרי, וילדיו נולדו כל אחד בעיר אחרת ברחבי האימפריה האוסטרית, במקום שירותו של אלכסנדר. בשנת 1866 פיקד אלכסנדר על כוחות הדוכסות הגדולה של הסן במהלך מלחמת אוסטריה–פרוסיה, והשתתף עמם בקרב טאוברבישופסהיים, ולאחר ההפסד במלחמה פרש מהצבא.