O Palácio dos Condes de Avillez faz parte de um interessante conjunto de casas nobres dos séculos xvii e xviii que se inscrevem na malha urbana medieval e renascentista de Portalegre, ou nas suas imediações. Construído por iniciativa de uma das mais importantes famílias da cidade, num espaço urbano já nobilitado, pela tradição local, como antiga propriedade ligada à figura de D. Nuno Álvares Pereira, o palácio veio, por sua vez, a contribuir para a reorganização urbanística desta zona limítrofe do núcleo antigo.

O programa arquitetónico do edifício, onde o Barroco se alia já ao Neoclássico, é bem revelador do estatuto da família fundadora, integrando soluções como os torreões laterais da fachada, que citam, embora em resolução vernacular, aqueles do Palácio de Mafra. No interior, destacam-se a escadaria central, que participa, com o átrio e os salões nobres, dos espaços de aparato do palácio, e o conjunto de painéis de azulejos do século xviii que os decoram, de grande efeito cénico.

A classificação do Palácio dos Condes de Avillez, também designado Antiga Casa da Família Avillez ou Antigo Solar dos Avillez, reflete o caráter matricial do bem, ao seu interesse como testemunho notável de vivências ou factos históricos, ao seu valor estético, técnico e material intrínseco, à sua conceção arquitetónica e urbanística, e à sua extensão e ao que nela se reflete do ponto de vista da memória coletiva.

Conforme pode ler-se na Portaria nº 162/2023, hoje publicada em Diário da Republica, este imóvel foi agora classificado como Monumento de Interesse Público.