Avant l’incendie du 27 juillet 1825, le sud de la ville (intra-muros) bénéficiait de l’eau de la fontaine Saint-Martin, située dans une rue perpendiculaire à la Grande Rue du Bourg-Dessus. Cette rue n’étant pas reconstruite, la fontaine est déplacée et reconstruite en 1827 ou 1828 plus au sud, dans ce qui devient une place située à l’intersection de la Grande Rue et de la rue du Quai (aujourd’hui quai Valette). Reconstruite en pierre et ornée d’un lion en fonte, elle est d’abord appelée fontaine du Quai, avant de prendre le nom de fontaine du Lion. Elle est alimentée par la source de la Prévôté (dite aussi du Bas Belin), située à côté de la tour Bénite et sur laquelle M. de Bonmarchand, propriétaire de l'immeuble du 87 rue de la République, possède des droits (cette concession remonterait à 1583, au profit du couvent de cordeliers). En 1849, Bilon obtient l’autorisation de prélever l’eau de la fontaine (entre 22h et 2h du matin) pour alimenter ses bains publics établis dans l’ancien couvent de carmélites. La fontaine n'est plus en eau.