Alonso de Covarrubias, architecte de la Renaissance, a créé le Palais Ducal de Pastrana, une structure de la Renaissance, au 16ème siècle. En 1941, il a été classé monument national et, en 1966, site historico-artistique.

Le palais ducal (créé par Antonio Fernández Alba) présente un plan carré avec des tours d'angle et une cour centrale. À l'arrière du palais se trouve un jardin en gradins. Le palais n'a jamais été achevé pour des raisons juridiques.

La façade du palais est en pierre de taille et ne présente pas beaucoup de décorations. La façade principale, de style Renaissance et portant l'inscription " De Mendoza y de La Cerda ", se distingue au centre par son caractère italianisant. On y trouve des plafonds à caissons de style plateresque, également créés par Alonso de Covarrubias. La partie inférieure de la structure est décorée de plinthes en carreaux de Tolède de style mudéjar et de meubles chinois du XIXe siècle, tandis que les murs sont recouverts de tapisseries créées par l'artiste mudéjar Luis Cienfuegos.

Sa conception remonte à 1541, année où la grand-mère de la princesse d'Éboli, Ana de la Cerda y Castro, a acheté le village de Pastrana. La princesse d'Eboli fut emprisonnée dans son palais en 1581 et y mourut en 1592, soignée par ses trois servantes et sa plus jeune fille, Ana de Silva (qui deviendra plus tard religieuse).

La Plaza de la Hora, qui doit son nom à la possibilité qu'avait la princesse de quitter le palais une heure par jour, se distingue par son balcon grillagé. Après la fuite d'Antonio Pérez vers le Royaume d'Aragon en 1590, Philippe II ordonna que les portes et les fenêtres du Palais Ducal soient grillées. Mara Ana de Austria, fille de Mara de Mendoza et de Juan de Austria, y est également née.

Le palais conçu par Carlos Clemente et Antonio Fernández Alba a été acheté par l'université d'Alcalá en 1997 et a été achevé cette année-là.