Couvent construit à partir de 1646 pour les frères du tiers ordre de saint François, primitivement au couvent de Sainte-Barbe au Mesnil-Jourdain (Eure) et installés dans des maisons de Louviers des 1602. Eglise Saint-François et dortoir achevé en 1659. Transformé en prison après 1789, et en tribunal (dans l'église) à partir de 1792. L'église est détruite en 1827. Le percement de la rue des Pénitents en 1863 provoque la destruction de la galerie nord du cloître. Le dortoir est aujourd'hui converti en bâtiment d'habitation