Fredberg var främst känd som Göteborgshistoriker genom sitt verk "Det gamla Göteborg" vilket kom ut i två upplagor 1919-1923, häftesvis där de tre delarna omfattade 25 häften vardera, för 1 krona styck eller tre delar i en bibliofilupplaga för 300 kronor. Bokverket omfattade närmare 2 700 sidor och 1 600 illustrationer. Det var inför Göteborgs 300-årsjubileum (1923) som Fredberg började verkets utgivning, vilket skulle innehålla "Skildringar, lokalhistoriska anteckningar, sägner, historietter, anekdoter, personalia, porträtter, interiörer samt vyer av gamla hus, gårdar och gator".