Faren hadde i 1920 fått sønnen Heinz Hitler, som i motsetning til William Patrick var en engasjert nasjonalsosialist. Men etter den nasjonalsosialistiske maktovertakelsen, flyttet William Patrick til Tyskland og håpet på å kunne profittere på navnet og sin onkel. Adolf Hitler skaffet William Patrick først en jobb i en bank, deretter arbeidet han på en Opel-fabrikk og senere som bilselger. Men William Patrick skal ha plaget onkelen med sitt nærvær. Adolf Hitler tonet sterkt ned sin familie og var redd for at de skulle sette ham i en pinlig situasjon, blant annet var han redd for at halvbrorens, William Patricks fars, bigami skulle bli mer kjent enn de ryktene som allerede gikk.