En 1791, lors de la vente des biens nationaux, Jean-Baptiste Lavague achète deux maisons dans le quartier du cloître Notre-Dame, répertoriées aux n° 8 et 9. Ces édifices passent ensuite à Théodule Dusser qui fait rénover l'ensemble architectural, en 1858, par l'architecte Dulac, afin d'y installer un bureau de poste. A la fin du 19e siècle, l'immeuble est démoli pour procéder aux travaux d'élargissement de la rue Notre-Dame. C'est au début du 20e siècle que le Crédit lyonnais édifie un nouvel établissement bancaire à Montbrison, tout près de l'hôtel de la Caisse d'Epargne, construit en 1904.