El edificio, en su origen, fue un convento con un colegio anexo (bula de 1552) que más tarde pasó a ser Universidad (bula de 1569), la cual estuvo funcionando hasta su clausura definitiva en 1824. En la actualidad vuelve a ser sede Universitaria. Las obras comenzaron en 1553 y concluyeron a mediados del siglo XVIII.Foto:jrgcastro
Fue declarado Monumento de las Bellas Artes por la reina Isabel II de España, conmutado por Monumento Nacional, teniendo en la actulidad la consideración de Bien de Interés Cultural del Patrimonio Español. En dicho Colegio se fundó la primera Biblioteca Pública Nacional de España (siglo XVI), actual Biblioteca Pública del Estado, Fernando de Loazes.Foto:jrgcastro
Según Javier Sánchez Portas, historiador y antiguo directo de la Biblioteca cuando ésta se ubicaba en el Palacio "el edificio es uno de los ejemplos más representativos del Palacio nobiliario oriolano". Tras diversos avatares a través del tiempo, en los que los bajos del palacio fue alquilado a diferentes usos, reservando los altos para residencia ocasional de los herederos de una rama de la familia, en 1940.Foto:jrgcastro
Originariamente fue palacio del marqués de Rafal, primera mansión de la gobernación oriolana. Sus caballerizas se han convertido hoy en salas de audición musical y de exposiciones; sus bajos techos y su tosca piedra arenisca la confieren un muy noble cuño. Parte de las dependencias de la casa están preparadas para visita pública.Foto:jrgcastro
Su principal día es el Día de la Reconquista (17 de Julio). El Oriol es llevado por el Síndico Portador del Oriol hasta el monumento de La Armengola y de allí vuelve a entrar en el ayuntamiento. Es de destacar que como el Oriol no se puede inclinar ante nadie es bajado y subido por el balcón de la casa consistorial mediante unas cintas.Foto:antolozaom