Fue construido por Francisco de Mora para albergar el Salón de las Cortes. Hoy como Palacio del Senado cuenta entre sus varias dependencias, con una magnífica biblioteca neogótica de 1883.

Es una de las instituciones españolas que en el último cuarto del siglo XIX, ha estado más comprometida en el mecenazgo y el coleccionismo de arte. Así, cuenta con fondos en pintura histórica de la segunda mitad del XIX, con obras de Casado del Alisal, Sorolla, los Madrazo (L. y F.), Gisbert, Pradilla, Muñoz Degrain, Moreno Carbonero, Esquivel, Sanz y Cabot, Martínez Cubells, Martín Alonso, Agrasot y Vera Alejo; pintura moderna que ha ido adquiriendo entre 1983 y 1993 de destacadas figuras de las 17 Comunidades Autónomas como Juan Gris, Joan Miró, Tàpies, Benjamín Palencia, Carmen Laffón, Broto, Díaz Caneja, José Guerrero e Iturrino; una galería de retratos de Presidentes de la Cámara Alta proporcionando una valiosa documentación gráfica y una colección de escultura del XIX y de principios del XX con obras de José Gragera, Pablo Gibert, José Piquer, Mariano Benlliure, de Daniel González, Eduardo Chillida y Baltasar Lobo.