Nommée d'après la famille Pfister qui l'a possédée de 1840 à 1892. Construite à l'origine pour le marchand Ludwig Scherer en 1537

C'est le premier exemple d'architecture Renaissance à Colmar, avec des fresques uniques ajoutées en 1577 mêlant éléments historiques, bibliques et allégoriques