Sob uma fortificação romana foi construído o castelo medieval de Segura, por D. Sancho II, com o objectivo de defender a fronteira com Castela. Hoje o castelo está em completa ruína, persistindo uma parte da muralha denominada de Porta de Baixo, uma das entradas da povoação. (Imóvel de Interesse Público)
Estado de conservação: Mau.
