Samfunnet i Losby var på mange måter adskilt fra resten av kommunen, både sosialt og geografisk; sett bort ifra turstier er det kun Losbyveien i nord som er eneste veiforbindelsen til resten av regionen, noe som har medvirket til at Losby har forblitt relativt uforstyrret, og muliggjort utviklingen av et relativt lukket lokalsamfunn, der en tendens har vært at innbyggerne har arbeidet og bodd i Losby hele livet gjennom. Til tross for en skjermet beliggenhet ligger området kun 14 kilometer i luftlinje fra Oslo. Losby var på mange måter selvforsynt, blant annet med egen butikk og skole. Skolen var den første faste skolen i kommunen, bygget i 1858 av Losby Bruk. Skolen ble arbeiderbolig etter at den ble nedlagt i 1913 da Fredheim skole ble bygget og overtok som lokalskole. Omkring 1920 flyttet ekteparet Boeck fra Losby til en av sine andre eiendommer, Refsnes gods på Jeløya, der de bodde om sommeren; om vinteren bodde de på Munkedammen i Kristiania. I 1936 døde Lorentz Meyer Boeck og Kathrine Boeck flyttet da tilbake til Losby. Den manglende moderniseringen og investeringen i kombinasjon med høyt forbruk, også i forbindelse med selskapelighetene, medførte at Losby sakte ble utdatert og mindre konkurransedyktig. Da sagbruket stengte i 1953 gikk man over til å selge hele tømmerstokker, og fra 1956 ble driften lagt om til korndyrkning. I 1956 gikk storfebesetningen på 45 dyr til auksjon og flere hundre mål beitemark ble omgjort til åkerjord. Ytterligere areal ble frigjort til åkre da Losbyelva ble drenert. Kathrine Boeck var enkefrue i mange år etter sin manns død i 1936. I sin samtid ble hun kalt «Fruen på Losby» og var kjent som en sterk karakter. Hun representerte Losbys storhetstid og vedlikeholdt tradisjoner frem til sin død i 1958.