Ryberg var opptatt av hele samfunnets økonomi, og særlig var han opptatt av å motvirke fattigdommen og hjelpe fattige, syke, svake og hjelpeløse på den mest hensiktsmessige måte. Ryberg var et virksomt medlem av direksjonen for oppfostringshuset på Christianshavn, hvor han ble utnevnt i 1759, og da Johann Friedrich Struensee i 1771 besluttet å omorganisere Københavns fattigvesen fra grunnen av, stilte Ryberg (med presten Resewitz og rådmann Lunding) i spissen for den kommisjon, som resulterte i kabinettsordre av 16. oktober 1771, som opphevet de 3 særskilte direktiver for Vajsenhuset, oppfostringshuset og fattigvesenet og isteden ble det opprettet en alminnelig pleieanstalt, i hvis direksjon Ryberg også fikk plass. Arbeidsløse trengende ble her forsynt med råmaterialer, en stor lærfabrikk ble satt i drift på Almindeligt Hospital, ledet av en engelsk fabrikkmester. Denne nyordning, som var et brudd med bestående forhold, ble stort sett anerkjent, men opphørte 1781, da fattigvesenet igjen ble omorganisert.