I 1919 ble Page valgt inn til Representantenes hus for distriktet Cowper som kandidat for bøndene og Settlers Association of New South Wales, som i 1920 ble slått sammen med flere andre ruralbaserte partier for å danne det politiske partiet Country Party. Page ble dette partiets leder i 1921. Page satt som den første visestatsministeren for Australia. Dette var en embetstittel som ikke offisielt eksisterte i Australia før i 1968.