Es un edificio del siglo XIV y en el siglo XIX fue propiedad de los marqueses de Villaseca que luego, en 1901, pasó a ser de los marqueses de Viana y siendo mejorado sus colecciones artísticas. Sofía Lancaser se lo cedió a Cajasur en 1982.
Actualmente sigue siendo de Cajasur que, a través de su obra cultural, la ha adaptado como museo con una serie de colecciones distribuidas por sus salas:
- Galería de los Azulejos, el suelo pavimentado con mosaico romano
- Galería de los Cueros
- Salón de las Artes, con pinturas murales con representación de los cinco continentes
- Salón del Mosaico
- Salón del Artesonado
- Salón de las firmas
- Salón de Tobías
- Salón de Goya
Uno de sus grandes atracciones son sus doce patios unidos entre sí por galerías y con gran diversidad de plantas.