Cette maison représente la première œuvre architecturale de Juan de Villanueva qui réalise le projet en 1768 pour l’abbé Augustin Beliardi, Consul de France qui y vécut pendant les Séjours Royaux. C’était une personnalité politique très influente qui fut nommée Agent Général du Commerce et de la Marine en Espagne par le Premier Ministre français.
Pour ce projet, l’architecte propose un type d’édifice qui mette en valeur les éléments fondamentaux du style herrerien, refusant les tendances à la mode marquée par l’architecture française dominante.
La maison est conçue comme un édifice de plan rectangulaire dont les côtés sont parallèles à ceux du Monastère, et avait à l’origine seulement deux étages et une mansarde.
En 1773, elle fut vendue au Marquis d’Iranda, Don Simón de Aragorri y Olavide et fut destinée à la location. Elle fut longtemps occupée par l’Ambassadeur de France.
A la fin du XIXè siècle l’édifice se convertit probablement en résidence temporaire ou résidence d’été. Sa hauteur s’élèva d’un étage et deux balcons furent incorporés à sa façade principale ce qui modifia considérablement son aspect original.