Au XIVème siècle Chavaniac, localité d’origine gallo-romaine devenue seigneurie, appartenait à des bourgeois de Langeac : les Suat. C’est à cette époque que remonte la construction du manoir qui n’était à l’origine qu’une "Maison Forte". Le manoir de Chavaniac entra dans la famille Lafayette par le mariage, en 1708 , d’Edouard Motier de La Fayette et de Marie Catherine Suat de Chavaniac.
A la fin du XVIIème siècle, la "Maison Forte" des Suat fut détruite par un incendie. Reconstruite en 1701, la nouvelle bâtisse fut agrandie, pour devenir le château ou naquit, le 6 septembre 1757, le marquis de Lafayette. Dés 1791, Lafayette fit moderniser le bâtiment par l’architecte Ambroise Laurent Vaudoyer aidé du peintre Albert Ancica.
Les transformations les plus marquantes eurent lieu par la suite en 1917 puis de 1920 à 1925 (élévation d’une tour carrée) à l’initiative du French Heroes Lafayette Mémorial Fund et du Mémorial Lafayette dont John Moffat fut respectivement le chairman puis le président. L’architecte ordinaire des monuments historiques de Haute-Loire, Achille Proy assura la conduite de ces dernières transformations.
Une description détaillée du château en 1883 présente le bâtiment comme un vaste parallélogramme, dont chaque coté a une longueur moyenne de 23 mètres sur environ 12 mètres de hauteur. La façade principale orientée au nord est flanquée de deux tours de 15 mètres de hauteur et de 20 mètres de circonférence, coiffées de campaniles.
Lafayette fit planter une allée de tilleuls, d’ormes, de frênes et de peupliers, longue d’un kilomètre.
Le château de Chavaniac remanié trois fois depuis l’incendie qui le détruisit à la fin du XVIIème siècle, témoigne des aménagements conçus par les Suat en 1701, les Lafayette en 1790 et le mémorial, dont J. Moffat à partir de 1920.
Aujourd’hui, l’esprit et le cœur de Lafayette sont plus que jamais présents dans cette demeure où des voix vous font remonter le temps, et des lumières vous guident jusqu’au cœur du château, dans la chambre natale où le Marquis vit le jour, le 6 septembre 1757.
Les murs vous racontent l’histoire de sa vie, son enfance heureuse à Chavaniac, son mariage avec Adrienne de Noailles où comme pour une pièce de théâtre, le décor a été planté, et les personnages réunis pour mettre en scène ce grand événement. Au cours de la visite, vous partirez à la découverte de Gilbert Motier de La Fayette (fresque), vous prendrez quelques minutes pour lire les opinions très diverses sur notre héros (admirateurs et opposants), vous emprunterez le couloir pour découvrir dans la salle de la Haute-Loire ce que fut son enfance.
Vous poursuivrez votre visite vers la salle du Trésor, puis ce sera la chambre natale de Lafayette, et le mariage de notre héros qui va décider de son destin. Il vous sera permis de pénétrer dans le monde secret de la franc-maçonnerie auquel Lafayette sera fidèle tout au long de sa vie. Dans la galerie du XVIIIème, les philosophes de son siècle prendront la parole pour exprimer leurs opinions sur la lutte contre l’esclavage, thème cher à Lafayette.
En poussant les portes du salon de Mme. de Lafayette vous découvrirez un décor de style XVIIIème , des panneaux de papier peint en arabesques, un parquet "Versailles" , un mobilier restauré, dans une atmosphère très féminine.
Enfin, dans un petit théâtre reconstitué à la façon du XVIIIème siècle, vous assistez à la projection du film où son épouse Adrienne vous retrace l’Épopée américaine du Général ou sa lutte pour libérer le peuple du nouveau monde du joug de l’Angleterre.
Le château de Chavaniac comprend un grand escalier d'honneur à rampe en bois, une galerie ornée de peintures murales et une salle à manger Louis XIII, la salle des gardes, la salle de l'écho au papier peint chinois.
Au premier étage du château de Chavaniac se trouvent le grand salon, la bibliothèque, la chambre de Clèves, la chambre rose, la chambre natale de Lafayette, la chambre Adrienne, la chambre verte mitoyenne ainsi que la chambre Floride et son appartement.
Au deuxième étage, on trouve la grande coursière, la chambre Armand, la chambre Persane et au troisième étage, la chambre Gilbert avec une salle de bain et un sauna. La chambre carton à chapeaux et le salon de l'amitié franco-américaine sont situés au quatrième étage.