Bärbig galt als „roter Architekt“ und wurde 1933 von den Nationalsozialisten mit einem Berufsverbot belegt. Er emigrierte 1934 nach Brasilien, wobei er seine Tochter bei Verwandten in Dresden zurückließ. Eine Wiedereinreise nach Deutschland wurde ihm 1939 verweigert. In das zerstörte Dresden kehrte er 1945 zurück. Dort war er Mitglied des 1. Trümmerkomitees und Mitbegründer des neuen BDA. Beim Wettbewerb um die Neugestaltung Dresdens 1952 war er Leiter der freischaffenden Architekten. Seine Planungen um eine Neugestaltung des Dresdner Stadtzentrums erfolgten in einer Weise, „der man heute durchaus mit Hochachtung begegnen muß.“