El condado estaba dividido en tres castellanías, Gruyères, Montsalvens y Vanel, cada una con un castillo.