Establecido en Madrid, cerca de la Puerta de Santa Bárbara, el primer enclave de la Real Fábrica de Tapices tomó de allí su nombre y fue conocido como la “Casa de Santa Bárbara”. A finales del siglo XIX, el crecimiento de Madrid determinó su traslado a la actual ubicación en Olivar y Huerta de Atocha.

El edificio fue encargado en 1884 al Académico y Arquitecto Mayor de Palacio José Segundo de Lema, quien concibió al edificio como una estructura inspirada en modelos ilustrados con expresión arquitectónica propia del Eclecticismo Historicista del último cuarto de siglo. La planta forma una manzana cerrada compuesta por varios pabellones, entre los que destaca en altura el destinado a recepción y residencia de los directores del establecimiento.

La Real Fábrica de Tapices fue declarada en 2006 Bien de Interés Cultural, tanto por su valor arquitectónico como por conservar hasta hoy sus funciones originales.