Situé stratégiquement à 400 mètres d'altitude, au coeur des bocages du Brionnais, le château fort Saint-Hugues est un modèle d'architecture militaire des Xe et XIIe siècles, résidente de la puissante famille des Seigneurs de Semur dont est issu Saint Hugues, Grand abbé de Cluny. Le château conserve un rare specimen de donjon roman, protégé au devant par deux tours rondes de défense abritant salles de gardes, "oubliette", cachots...
Son âge millénaire en fait l'un des plus anciens de Bourgogne et le seul existant en Charolais-Brionnais. Le château fait partie de l'ancienne forteresse de Semur-en-Brionnais, aujourd'hui inscrit parmi les plus beaux villages de France et les sites clunisiens. On peut y visiter de très belles églises romanes, le grenier à sel, la salle du chapitre ; faire le tour de l'ancien rempart et assister aux animations proposées tout au long de la saison : visites guidées, visites nocturnes aux flambeaux, après-midi jeux médiévaux, banquet médiéval...
