Se trata de un hermoso palacio en el entorno externo de la muralla, ubicada en una plaza que merece un agradable paseo. Ocupa el lugar donde se ubicaba la sinagoga de la Judería Nueva, transformada en Ermita de la Cruz.
El actual edificio fue construido en el siglo XVI, al estilo renacentista con detalles manieristas como los sillares almohadillados de su portada y reminiscencias medievales como los detalles góticos o el patio.
Sus dueños fueron los Blázquez-Mogollón, Marqueses de la Isla.