Entre sus características más destacadas se encuentra su arquitectura, la cual es una mezcla de estilos que van desde el barroco hasta el neoclásico. El monasterio también cuenta con un hermoso jardín, el cual es un oasis de paz y tranquilidad en el centro de la ciudad.
El 13 de mayo de 1.831 la Virgen se aparece a una monja de veinte años en el convento de Caballero de Gracia, conocido así hasta el 1.838 que lo derriban, la monja era, Sor Patrocinio. La Virgen le da una imagen para que se venere bajo la advocación de la Virgen del Olvido Triunfo y Misericordias.
El convento tenía el nombre de monasterio de San José de Jesús y María, pero ese nombre canónico no se usaba ni popularmente ni oficialmente, de manera que en las escrituras públicas siempre se refieren al convento del Caballero de Gracia. La ley de exclaustración de 1.836 expulsa a la comunidad de la calle del Caballero de Gracia. Entonces se las obliga a trasladarse al convento de Concepcionista de La Latina de la calle Toledo de Madrid.
Esta comunidad va a vivir un largo calvario de convento en convento hasta que se instala en La calle de Blasco de Garay, cuyo monasterio, canónicamente, se llama igual que el que hubo en Caballero de Gracia: monasterio de San José de Jesús y María.