Paladset er bygget på grundmurene af et tårnhus, som kan dateres tilbage til det mauriske rige i det 9. århundrede. Den oprindelige bygning er blevet udvidet og ændret mange gange, siden den blev grundlagt under Taifa-riget i 1065. Især efter de katolske kongers tilbageerobring i 1118 var dens design bemærkelsesværdigt påvirket af de indvandrende muslimer og deres berømte Mudejar-stil.