Das Gebäude war einst die Residenz von Sully und später von Henri IV., der hier eine Wohnung einrichtete. Im 18. Jh. legte der Gelehrte Marquis d'Argenson hier eine Sammlung von Büchern an, gefolgt vom Grafen von Artois. Dazu kamen in der Zeit der Französischen Revolution u.a. die Archivalien aus der Bastille. So wurde das Arsenal 1797 zur Nationalbibliothek. Der Manuskriptsaal, der Musiksalon aus dem 18. Jh. und das Arbeitszimmer von La Meilleraye (Gemälde aus dem 17. Jh.) sind zu besichtigen.