Sur la plus haute colline de la ville, avec 548 m, la taupe solitaire rectangulaire de l'Alcazar domine l'horizon. C'est l'un des rares bâtiments exemptés de la ville. Les vestiges des structures précédentes indiquent qu'il a toujours été un lieu fortifié, depuis le prétoire romain et la défense de la citadelle musulmane.

L'édifice actuel a été commandé par l'empereur Carlos V pour avoir une résidence digne d'un tel monarque. Pour cela, l'ancien château médiéval a été presque entièrement détruit, bien qu'il y ait des structures crénelées sur la façade orientale. Chaque façade du bâtiment détermine artistiquement le moment où il se déroule, dans les différentes phases de la Renaissance espagnole.

Pendant des années, il a abrité une partie du catalogue du Musée de l'Armée, étant adapté pour le loger dans son intégralité, en tant que seul site national de cette collection et inauguré en tant que tel en 2010. Des travaux ont également été réalisés pour permettre à l'étage supérieur du bâtiment de répondre aux besoins des Bibliothèque moderne de Castilla-La Mancha.