Les substructures d'une maison forte ou château primitif de Saint-Didier (caves ?) dateraient du 12e ou 13e siècle. La seigneurie relève d'abord de l'église de Lyon, puis des sires de Villars (reprises de fief en 1215 et 1243) , et sera rattachée au Franc Lyonnais au début du 16e siècle. Hugues de Saint-Didier, cité en 1271, est le 1er seigneur connu du nom. Au 17e siècle, la seigneurie appartient à la famille Bernoud, puis à dame Françoise Pillehotte, dont l'héritier, Camille de Barillon, seigneur de Saint-Didier en 1702, vend le château et une partie des terres en 1706 à Jean Hubert, ancien échevin de Lyon, syndic général du Franc Lyonnais. Jean Hubert est anobli le 30 mars 1708 et obtient en 1725 l'entière justice sur la seigneurie, qui restera dans sa famille jusqu'en 1793. En 1719, à l'occasion du mariage de son fils Benoît Victor avec Antoinette Anisson, d'une famille d'imprimeurs lyonnais, le château est modernisé, une aile y est ajoutée, l'enceinte abattue est remplacée par un mur de clôture. Peu avant la Révolution, une partie de cette aile est démolie, l'autre englobée dans les transformations que réalise l'épouse d'Ennemond Augustin Hubert de Saint-Didier, qui ajoute aussi un corps de bâtiment pour la cuisine. Ennemond Augustin, résidant à Pise, est considéré comme émigré en 1792 et ses biens vendus le 24 messidor an II. Son fils Balthazar Augustin (1779-1863) fut le dernier possesseur de la seigneurie, qui avait titre de baronnie et comprenait le château, l'église et la chapelle, le cimetière, le tribunal, la prison et les maisons du vieux bourg actuel. Le château a été partiellement démoli en 1822, et des dépendances construites dans la cour au 19e siècle