Bei Sanierungsarbeiten 2003 wurde unter dem Burggut ein Keller entdeckt und erforscht, der mit der mittelalterlichen Synagoge an dieser Stelle und damit mit dem jüdischen Leben in Kulmbach in Verbindung gebracht werden konnte. Der heutige Bau mit seiner ausladenden Renaissancefassade entstand nach dem Bundesständischen Krieg und wurde 1557 begonnen. Bauherr und erster Bewohner der Anlage war Johann Streitberger.