Richter gledet seg til å ta fatt i embedet, og hadde gode tanker om hvordan det skulle arte seg. Han gledet seg også til et tett samarbeid med Sverdrup, men ble følgelig skuffet over det han oppfattet som «mangel på hjertevarme» fra Sverdrups side. De ble også raskt mer politisk uenige, og avstanden som hadde vært mellom dem i Stortinget tidligere økte. Allerede den første dagen den nye regjeringen møtte i Stortinget, den 2. juli 1884, uttrykte Richter uenighet med Sverdrups forsvar for utvidelse av stemmeretten. Da forslaget til ny hærordning skulle behandles, stemte Richter med taperen og den som videre måtte trekke seg, arméminister Ludvig Daae. I februar 1885 mistet Richter dessuten sin kone.