Il museo è costituito innanzi tutto dal Palazzo stesso con i suoi cicli di affreschi;gli arredi e la torre.Inoltre nel palazzo ha sede la pinacoteca;che documenta la storia e l'arte della città di San Gimignano.Questa raggiunge il suo massimo splendore all'inizio del Trecento;quando l'influenza dominante;politica ed artistica;è quella senese.Le opere del Quattrocento;in gran parte di artisti fiorentini;documentano il passaggio di San Gimignano nell'orbita politica fiorentina.Nel 1996-97 il museo è stato riallestito con caratteristiche espositive più moderne.