Sam Prichard zapisał Uniwersytetowi Harvarda pewną sumę pieniędzy, która w całości miała być wykorzystana na zakup dzieł sztuki. W listopadzie 1892 roku Corporation of Harvard wyznaczyła jako miejsce pod przyszłe muzeum plac w College Yard, wychodzący na Cambridge Street. thumb|left|Fogg Art Museum (1895) Projekt muzeum wykonał nowojorski architekt Richard Morris Hunt. Na jesieni 1895 roku budynek został otwarty dla publiczności. Początkowo jego zbiory były niewielkie; składały się na nie odlewy i fotografie oraz niewielka kolekcja obrazów i osobliwości. Jednak już pierwszym roku istnienia muzeum zaczęły w jego zbiorach pojawiać się oryginalne dzieła sztuki. Zbiory z biegiem lat rosły a budynek muzeum stawał się coraz bardziej niewystarczający. Latem 1912 roku, dzięki hojności Alfreda A. Pope’a, przebudowano parter, aby uzyskać dodatkowe miejsce dla celów wystawowych. W następnym roku, dzięki hojności wielu przyjaciół muzeum, przebudowano piętro budynku.