Avec une citation en 966, la seigneurie de Boissezon de Matviel se situe dans les premiers temps de la féodalité dans la vicomté d'Albi tenue par les Trencavel. À l'issue de la Croisade des Albigeois, elle se retrouve dans la seigneurie de Castres constituée des terres de la vicomté ayant appartenu aux Trencavel et que le roi donne en fief à Philippe de Montfort en 1229. La seigneurie de Castres dépend de la sénéchaussée de Carcassonne et Béziers et sera érigée en comté en 1356.