Flere tragedier rammet Viktorias liv etter at hennes sønn Georg døde av kreft i 1938. Under andre verdenskrig blei Viktorias residens i Kensington Palace bombet, hvorpå hun flytta til Georg VI på Windsor Castle. Hennes overlevende sønn, Louis, og to av hennes barnebarn tjenestegjorde i Royal Navy, mens hennes tyske slektninger kjempa på fiendens side. Viktoria bekymra seg mye over sine barn og barnebarn etter hvert som åra gikk. Datteren Alice forble i det okkuperte Hellas og hadde få muligheter til å kommunisere med sin mor i de fire årene krigen var på sitt mest intense. Etter de alliertes seier blei hennes sønn, Louis, tilbudt embetet , men hun motsatte seg hans aksept av tilbudet. Hun tenkte at denne posisjonen ville medføre mye fare. Til tross for hennes misnøye valgte han å tiltre stillinga.