Château-Fort Xème - XVIIIème siècle.
Fier vaisseau perché sur son roc le château de Brousse domine les vallées du Tarn et de l'Alrance, protégeant orgueilleusement son village classé parmi les Plus Beaux Villages de France.
Le château de Brousse a conservé son enceinte fortifiée ainsi qu'une grande partie de son chemin de ronde. Tours, logis des officiers, résidence seigneuriale, four à pain, pigeonnier, puits-citerne, meurtrières, prison, latrines, mâchicoulis... du Moyen Age à la Renaissance c'est un véritable voyage à travers le temps architectural qui attend le visiteur. Propriété des Comtes de Rouergue puis de la puissante famille d'Arpajon pendant près de 500 ans, c'est aujourd'hui le Foyer-Rural de Brousse-le-Château qui en assure la gestion et l'animation (exposition de peintures, tapisseries, photos, outils anciens).