Maison forte bâtie au 14e siècle, comprenant un vaste domaine démembré à partir de 1920. Le château vendu en 1940 par le dernier descendant des seigneurs de Choumouroux, le baron Pierre de Sanhard. Le château et le domaine sont acquis conjointement par le département et par la commune le 31 décembre 1956, le premier en vue d'y installer une école d'agriculture d'hiver et une exploitation agricole d'expérimentation, la seconde pour y créer un parc d'agrément et y exploiter des gîtes ruraux et un camping. Le projet prévoit que l'école et ses bâtiments occupent une surface de 8,9 hectares de terres, et que la maison forte et les terrains avoisinants soient affectés à la réalisation du programme communal.

L'école d'agriculture et son exploitation occupent donc la ferme attachée au domaine de Choumouroux, disposant d'une étable avec grange au-dessus, d'une petite porcherie et de caves voûtées dont une contiguë à l'étable est transformée en laiterie. Un petit verger et un jardin complètent l'exploitation. En 1955, école d'agriculture et exploitation d'expérimentation sont regroupées sous l'appellation de "foyer de progrès agricole", auquel est attaché un ingénieur des travaux agricoles, organisation des activités démonstratives et des actions collectives d'expérimentation en vue d'augmenter la productivité des exploitations agricoles.

NB : il semble que le foyer de progrès agricole ait donné lieu à la construction d'un bâtiment (cf. Quesada, ill. p. 20) A VERIFIER

En vertu de la loi du 2 août 1962 qui réorganise l'enseignement agricole, rattaché au ministère de l'Agriculture, et donne une large place à l'enseignement général, le foyer de progrès agricole est transformé en collège agricole par décret du 12 avril 1963 (QUESADA T., 2013, p. 23). Dès cette date, des pétitions sont régulièrement adressées à la préfecture de Haute-Loire par le Sou des écoles et l'Association des parents d'élèves de l'enseignement libre (APEL) en vue de la création d'un lycée climatique à Yssingeaux, en raison notamment de l'augmentation de la population scolaire locale, obligée de se déplacer jusqu'au Puy-en-Velay ou dans la Loire pour fréquenter le lycée. C'est un C.E.S. qui est dans un premier temps projeté, devant être construit sur la partie du terrain du domaine de Choumouroux qui avait été acquise par la municipalité, proposé en 1963 au Conseil départemental des constructions scolaires et agréé par ce dernier en 1964. Le ministère de l'Education nationale valide le projet de collège en 1966 et demande qu'il soit doublé d'un C.E.T. industriel et commercial de cycle long et d'un C.E.T. économique et administratif de cycle court. La construction devra recourir à la "formule industrielle", afin que les locaux puissent être rapidement livrés. En revanche la qualification en lycée climatique est refusée, Yssingeaux ne faisant pas partie des stations climatiques classées (AD Haute-Loire, 1331 W 19). C'est finalement un collège agricole qui voit le jour, dont les bâtiments (collège, auditorium, gymnase, maison du directeur, logements de fonction) édifiés au sud du foyer de progrès agricole sont achevés en 1967.

Les bâtiments sont restructurés et agrandis entre 2009 et 2014 et leur aspect extérieur largement modifié, à l'exception du gymnase et des logements de fonction. Les travaux de rénovation ont concerné la création d'un internat de 260 lits, une demi-pension et un pôle d'administration, ainsi que la rénovation des anciens bâtiments.