1920年(民国9年)の安直戦争で安徽派が直隷派に敗北すると、呉は財政部次長を罷免されてしまう。