Die Art Gallery wurde 1832 gegründet, um ein Geschenk von etwa 100 Werken des amerikanischen Künstlers John Trumbull (1756 bis 1843) auszustellen. Heute besteht die Galerie aus drei miteinander verbundenen Häusern, dem gotischen Swarthout Building, der Street Hall von 1866 und dem kürzlich renovierten Hauptgebäude, das 1953 von Louis Kahn entworfen wurde. Die Sammlung umfasst 185.000 Werke mit dem Schwerpunkt auf amerikanischem Kunsthandwerk sowie Malerei und Skulpturen aus dem Europa des 19. und 20. Jh.