I 1903 solgte Lundgreen eiendommen Torbjørnsbu til Arendal kommune for kr. 40.000,-. De første årene etter 1903 omtales Torbjørnsbu som kommunens fattighus. Så ble huset pleiehjem som det var fram til 1970-årene. Kombinasjonen pleiehjem og gårdsdrift var på mange måter økonomisk – ikke minst for Arendal kommune.