W 1920 roku, po wybuchu wojny polsko-sowieckiej, sytuacja finansowa Uniwersytetu znacznie się pogorszyła, co bardzo utrudniło prace organizacyjne przy nowo powstającym obserwatorium. Piętrzące się problemy, a także ulgi proponowane Graffowi przez Uniwersytet Hamburski (m.in. w postaci zwolnienia z zajęć dydaktycznych) spowodowały, że w 1921 roku ostatecznie odmówił on przyjęcia funkcji kierownika obserwatorium poznańskiego (jednak mimo to aktywnie pomagał później w organizacji obserwatorium swojemu następcy).