Localizada a meio caminho entre a base do alto da Memória, onde existia um antigo castelo, e o porto, foi edificada em 1474 a mando de João Vaz Corte-Real, Capitão Donatário de Angra. O edifício conserva alguns traços da primitiva construção, com clara influência do estilo gótico, embora tinha sido alvo de muitas transformações ao longo do tempo.