Bereits 1913 erkannte man das Potential, Fachwerk freizulegen. So wurde das Haus in der Ziegelstraße sowie die benachbarten Häuser von Putz befreit. Wahrscheinlich eine direkte Reaktion auf die zeitgenössischen Steinbauten, die auf der Marktseite gebaut wurden. Es entwickelte sich also eine Art „Kampf“ um den Erhalt der historischen Baukultur.  Und das war gut so, denn die Ziegelstraße 4 war ein repräsentatives Fachwerkhaus, in einer 1A-Lage zu Marktplatz und Rathaus. Als frühester Eigentümer wurde 1689 Christoph Ballauff, Kaufmann und Senator der Stadt, genannt. Vor allem das Hinterhaus wurde für den Handel mit Gütern aus Bremen genutzt. Auch von der Familie Köster, ab 1800 die neuen Besitzer. Sie handelten mit Tabak aus Bremen und dürften während der Blockade der Rheinschifffahrt in der Napoleonischen Ära sehr lukrative Geschäfte gemacht haben. Ab Mitte des 19. Jahrhunderts nahm die Bedeutung der Weserschifffahrt rapide ab – die Eisenbahn wurde zum Star des Transportverkehrs. Die Ziegelstraße wurde weiter als Wohn- und Geschäftshaus genutzt.