Les seves constitucions foren reformades per Martín de Ayala (1702). Afectat pels bombardeigs de la guerra del Francès, fou reconstruït el 1813 en estil neoclàssic, i la seva façana reformada el 1928 segons models castissistes. L’edifici fou enderrocat el 1960 i substituït per un de més modern, en una part del qual subsisteix la institució.