Le site de Capdenac était déjà habité par l'homme au Néolithique moyen. Particulièrement propice à un habitat, il a été occupé très longtemps. Pendant l'Antiquité, Capdenac était un oppidum romain longtemps considéré comme étant le dernier bastion gaulois contre César. Lorsque Galiot de Genouillac en devient le Seigneur au XVIe siècle, le livre d'histoire de la ville est déjà bien rempli de batailles, pillages, envahissements, etc. La citadelle nous révèle des remparts des XIIIe et XIVe siècles avec portes, donjon carré avec échauguettes (tour de Modon), maisons médiévales et haut calvaire de pierre du XVIIe siècle. C'est un îlot de pierres suspendu.