Situado no ponto mais elevado da cidade, o Castelo de Elvas é uma obra de fortificação islâmica, reconstruída nos séculos XIII e XIV, tomando só no séc. XVI o aspeto atual. Acolhia o alcaide de Elvas e foi palco de importantes acontecimentos da história do país como tratados de paz, trocas de princesas e banquetes de casamentos reais.

Ao longo dos séculos, o castelo foi perdendo importância defensiva, ficando sem qualquer função militar a partir da segunda metade do séc. XIX. Este facto levou a que o edifício fosse deixado ao abandono, entrando no séc. XX arruinado. Vários elvenses amantes da história e do património quiseram promover o seu restauro, a sua visibilidade e entabularam um processo que faria do castelo de Elvas, em 1906, o primeiro Monumento Nacional português.

Até à Idade Moderna, a defesa era composta por três cortinas defensivas, conservando as duas mais antigas importantes estruturas do período muçulmano.