Sultan Abdülaziz, 1869 yılında dört katlı bir konağın bulunduğu bu araziyi Aziz Vincent de Paul’ün Yardımsever Kızları cemiyetine, yetimhane olarak kullanılması şartıyla tahsis etmiş. Saint-Joseph Fransız Yetimhanesi aynı sene, bitişiğindeki Saint Eugène ilkokuluyla birlikte kapılarını açmış. Her iki kurum da 1937’ye kadar faaliyette kalmış. Yapının durumunun zamanla kötüleşmesi ve mülkiyetine ilişkin çözülemeyen uluslararası hukuki anlaşmazlıklar sonucu bina, 2022’de Beyoğlu Belediyesi tarafından devralındı. Yıllar içinde bostanı, kuyuları, terasları ve akan su kaynaklarıyla değişmeden kalan bahçe, günümüzde “Tophane Mekân” adıyla kamusal bir alan olarak işlev görüyor.