El 25 de junio de 1864, después de la muerte de su padre, Carlos accedió al trono y se convirtió en el tercer rey de Wurtemberg, y Olga en la cuarta reina.