La Casa de las Alhajas fue la sede original del Monte de Piedad de Madrid, que operaba desde el siglo XVIII y estaba ubicada en la plaza de San Martín nº 1, en el solar que había dejado el derribo del convento de San Martín, por José Bonaparte.

En 1838 se creó la Caja de Ahorros de Madrid, la primera de España, fundada por el marqués viudo de Pontejos, político y filántropo español, corregidor de Madrid desde 1936 a 1938.  La Caja nació como una institución benéfica que ofrecía préstamos sin cobrar intereses, sirviendo de modelo para otras cajas de España. Tanto la Casa de las Alhajas como la Caja de Ahorros se crearon para socorrer económicamente a las clases más necesitadas y se fusionaron en 1869, adquiriendo el nombre de Caja de Ahorros y Monte de Piedad de Madrid.

Una vez unidas ambas instituciones, el gobierno del General Prim acuerda convocar un concurso para construir el edificio de la nueva entidad, y lo ganan los arquitectos Fernando Arbós y José María Aguilar. Las obras duran desde 1870 a 1875, y el edificio es un magnífico ejemplo de arquitectura decimonónica madrileña, originariamente destinado a las distintas operaciones de la entidad, entre las que se encontraban la tasación, custodia y venta de joyas, y de ahí el nombre de Casa de las Alhajas.

El edificio fue concebido como una fortaleza con estructura metálica que le da aspecto de fortaleza exterior, mientras que el interior es acogedor, con la cristalería central y las galerías realizadas con hierro laminado y cristal. Tiene notorios avances tecnológicos del momento, como ascensor hidráulico de hasta 400 kg de carga y calefacción central de aire calentado por vapor de agua.

En la actualidad, después de una amplia remodelación, se utiliza como sala de exposiciones y auditorio, gestionada por la Fundación Montemadrid (heredera de la Obra Social de Caja Madrid / Bankia).