Après une longue période de prospérité, le bourg monastique fut ravagé par la guerre de Cent ans avant d’être reconstruit à la fin du XVème siècle. Le village intégra ensuite l’art nouveau de la Renaissance et le Château des Doyens fut érigé le long du flanc nord de l’église. Ce château héberge désormais le Pays d’Art et d’Histoire.
Face à Carennac se trouve l’île baptisée Calypso, nymphe charmeuse de la mythologie grecque qui séduisit Ulysse et accueillit son fils Télémaque. Fénelon aurait d’ailleurs écrit ici son fameux traité d’éducation « Les Aventures de Télémaque » à l’attention du petit-fils de Louis XIV.