Ein grosser Brand zerstörte am 5. Dezember 1814 in der Kapellgasse neun mit Stroh bedeckte Wohnhäuser nebst Scheunen und weiteren Nebengebäuden. Nach dem Brand kaufte Jakob Isler das Grundstück an der Ecke Kirchenplatz/Kapellgasse und liess dort im Jahre 1819 das heutige Emanuel-Isler-Haus bauen. Im Garten des stattlichen, 3-stöckigen Wohnhauses mit dem altfranzösischen Walmdach wurde später noch das Gartenhaus erstellt. Das Emanuel-Isler-Haus steht heute unter Denkmalschutz.