Selon la légende, le bâtiment était si grandiose et imposant, qu'en 1812, lors de son passage à Vilnius pendant la Campagne de Russie, Napoléon aurai jeté un coup d'œil à l'intérieur de la synagogue à partir du seuil, et en aurai eu le souffle coupé d'admiration.