W latach następnych Gardner zgromadziła kolekcję światowej klasy obrazów, rzeźb i innych dzieł sztuki, a w 1903 roku otworzyła muzeum swego imienia, nadając jego budynkowi kształt i styl przypominający pałac Barbaro. kolejnym gościem pałacu Curtisów oraz Isabelli Stewart Gardner był amerykański pisarz i powieściopisarz Henry James. Odwiedził on Wenecję po raz pierwszy w 1869 roku i powracał do niej w latach 1872, 1880 oraz w 1887, kiedy gościł po raz pierwszy u Curtisów i Gardnerów. Jego liczne wizyty w Wenecji stały się inspiracją dla niektórych jego dzieł, jak Venice,The Grand Canal,Casa Alvisi i Aspern Papers. Miłość pisarza do Wenecji skończyła się nagle w 1894 roku, kiedy jego przyjaciółka, pisarka Constance Fenimore Woolson popełniła samobójstwo rzucając się z okna pałacu Semitecolo. James był tym głęboko wstrząśnięty, ponieważ czuł się winnym tej śmierci. Jego powieść The Wings of the Dove, rozgrywająca się w fikcyjnym Palazzo Leprorelli była wyraźnie inspirowana pałacem Barbaro. John Singer Sargent, amerykański malarz, był przyjacielem Ralpha Curtisa, syna Daniela i Ariany. Sargent przybył do Wenecji z rodziną po raz pierwszy w roku 1873. Powrócił tu w 1880 roku jako malarz po odbyciu edukacji artystycznej w Paryżu. Wynajął pracownię w Palazzo Rezzonico. Powracał tu kilkakrotnie w latach następnych.