Utzon var ikke på noe tidspunkt under utarbeidelsen av prosjektet til stede i Sydney. Ut fra sjøkart kunne han se at husets plassering i havnen minnet om Kronborg slotts plassering i havnen i Helsingør, som derfor var en viktig inspirasjonskilde. Når man fra vannet beveger seg rundt huset endres fasaden hele tiden og han ønsket derfor å skape en fasade som ikke var lik fra alle sider – en såkalt femte fasade.