Já existia na segunda metade do séc. XIII. Situada na falda ocidental de Monsaraz, pertenceria a Martins Anes e ao Bispo de É Durando Pais. A sua primitiva construção duocentista desapareceu, à excepção da parte da moldura duma parte gótica.

A construção actual é obra tardia do reinado de D. José I. Neste momento, depois de recuperada pela Câmara Municipal, funciona como espaço de cultura onde se realizam exposiçções, conferências, pequenos espectáculos, etc.

Descendo da fortificação primitiva, conquistada por, Geraldo Sem Pavor em meados do séc. XII. Desta fortificação primitiva pouco sobreviveu à reforma dionistina e tudo aquilo que podemos ver é um exemplo clássico da arquitectura militar do princípio do séc. XIV, tendo sido ampliado imediatamente a seguir à proclamação de D. João IV.

A Torre de Menagem, construída em granito nos começos do séc. XIV, conserva abóbadas ogivais nos seus dois andares: o térreo, antigo cárcere e depois armazém de armas; o cimeiro, sala nobre da alcaidaria com larga porta gótica e janela já assinalada no desenho quinhentista de Duarte Darmas.