Toller var overhoffsrettsassessor og senere viselagmann i Tønsberg. I 1660-årene kjøpte han store eiendommer rundt Christiania. Disse gikk senere i arv til døtrene Karen og Anne Cathrine Toller. Nils Tollers vei i Oslo er oppkalt etter ham.