Johan Anton Lippestad ble i 1904 direktør for abnormskolevæsenet i Norge (spesialskolene). Nils Jørgensen tok over som styrer ved Torshov skole, som nå var under statlig ledelse. Johan Anton Lippestad døde sommeren 1913. Carl Thorvald Lippestad arbeidet for vanskeligstilte barn selv etter at hans eldre bror sluttet som styrer ved Torshov skole. Etter sin brors død fikk han ferdigstilt Ullevålsveien skole, med Bredo Berntsen som arkitekt. Skolen er fortsatt i drift i Bolteløkka allé 8. Lippestad selv døde etter et magesår rett før åpning av skolen, bare uker etter sin eldre brors bortgang. Han etterlot seg sin kone Gudrun og fem barn.