Die Galerie stellt die aktuellste Entwicklung in einer langen Geschichte der Kunst an diesem historischen Ort im Herzen Capuths dar. Das an das Caputher Schloss angrenzende Grundstück war ursprünglich eine Bootswerft. Es wurde vor dem ersten Weltkrieg vom angesehenen Maler Max Arenz, einem Mitglied der Havelländischen Malerkolonie und Schüler des Historienmalers Franz von Defregger, gekauft. Auf dem Grundstück befand sich schon damals ein kleineres, viereckiges Wohnhaus, dessen Bauherr unbekannt ist. Es gilt jedoch als sicher, dass Max Arenz mindestens den Schuppen im Grundstückseck am Bach, auf dessen Grundrissen die heutige Galerie steht, errichtet hat.

Im Jahr 1932 kauften der Berliner Bankdirektor Ulrich Schneider und seine Frau Annemarie das Haus als ihre Sommervilla – eine von circa einem Dutzend Villen, die inzwischen an den Ufern der Havel gebaut worden waren. 1934 wurde mit Genehmigung des Schlossherrn die Villa um ein Drittel erweitert, aber explizit ohne Fenster zum Schloss. 1937 zog die Familie Schneider in die Nähe Templins in der Uckermark. Die Villa am Krughof 38 wurde von einem Künstler erworben, der unter anderem bei der Gestaltung von Kunstwerken für die Reichskanzlei mitwirkte.

1945 wurde das von der Familie des Künstlers verlassene Haus durch die russische Verwaltung beschlagnahmt. Zwei Etagen des Hauses wurden von Rotarmisten bewohnt und eine dritte Etage einer alteingesessenen Caputher Familie zugeteilt. Um diese Zeit existierte noch der einst von Fontane beschriebene ungestörte Blick über den Schwielowsee nach Potsdam hin – bis hin zur damals noch bestehenden Garnisonkirche. Der 1956 erbaute Bahndamm versperrte diese historische Sichtachse.

Nach dem Auszug der sowjetischen Soldaten wurde das Haus von der Gemeinde in fünf Wohnungen unterteilt. So lebten hier 40 Jahre lang die unterschiedlichsten Familien. Auch heute noch besuchen frühere Bewohner das Grundstück, um in Erinnerungen zu schwelgen und aus Interesse daran, was aus diesem geworden ist. Nach der Wende wurde das Haus an die betagte Tochter des 1945 geflüchteten Künstlers zurückübertragen. Sie besuchte das Haus noch einmal, um es dann zu verkaufen.