Château fort, classé Monument Historique, construit à la fin du XIIe siècle et complété au XVe. Il comprend un donjon et six tours. Le Château comprend un donjon et six tours restaurés au XIXème siècle. Il conserve son aspect défensif mais l’intérieur, harmonieusement aménagé, est chaleureux avec ses boiseries, son mobilier XVIIème et XVIIIème siècle et ses nombreux souvenirs familiaux. Il est toujours habité depuis 1756 par la famille des comtes de Pontgibaud.
Ce château est l’un des mieux conservés d’Auvergne. Il est l'exemple d’architecture militaire médiévale. Le château domine un rare potager en creux (classé M.H), labellisé Jardin Remarquable. Sur la rive de la Sioule, aux frontières du parc des Volcans d’Auvergne, le bourg de Pontgibaud était renommé pour ses mines de plomb argentifère. Un musée retrace l’histoire de l’exploitation de ces mines, datant d’avant l’époque gallo-romaine.