La première forteresse de Cessenon fut construite au Xème siècle. Possession de la famille Trencavel, elle était située à un emplacement stratégique privilégié, carrefour de voies de communications importantes et point de traversée du fleuve. Détruite une première fois lors de la Croisade des Albigeois en 1209, les murs sont remontés au XIIIème siècle (date probable de la construction du donjon encore debout). Les guerres de religion seront aussi à l’origine d’une grande part des destructions occasionnées à la forteresse, et finalement la majeure partie du château est rasé au XVIIème siècle. Seul encore debout, le donjon sur lequel flotte le drapeau occitan, symbole aujourd’hui encore de l’Occitanie et de son histoire mouvementée. Quelques fortifications sont aussi visibles tout autour du donjon.

Un panneau explicatif, ainsi qu’un très joli jardin et un belvédère sont présents autour du donjon. Une vue panoramique qui permet de découvrir la vallée de l’Orb et la région de Cessenon-sur-Orb.