Les ruines de l'ancien château fort de la baronnie d'Apcher, situées à Arzenc-d'Apcher, sont le témoignage le plus ancien du passé dans le canton. Il protégeait autrefois la ville de ses voisins de l'ouest, ce qui s'explique aisément par son site admirable, dominant les gorges du Bès. L'édifice était la propriété des barons d'Apcher, l'une des huit baronnies du Gévaudan. Bâti à la fin du XIIe siècle, il comptait une haute tour isolée, un corps de fortification et plusieurs tours cylindriques, construites deux siècles plus tard. De forteresse, le château s'est transformé en résidence de prestige, avant d'être abandonné au cours du XVIIe siècle.