Tendo sido destruído por corsários em 1616, apenas nove anos após a sua fundação, foi reedificado em 1725 e ampliado em 1822. As capelas anexas ao convento merecem destaque: a da Ordem Terceira por causa da imagem de Cristo, a do Senhor do Sepulcro onde se encontra um retábulo gravado e, por fim, a das Almas, revestida de azulejos do Séc. XVII, dedicados a Santo António. O edifício alberga hoje a Câmara Municipal e encontra-se classificado como Imóvel de Interesse Público.