Inicialmente ocupado pelo Palácio da Junta Geral do Distrito Autónomo de Angra do Heroísmo, em 1544 o rei D. João III cedeu o edifício à Diocese de Angra para serviço aos Bispos de Angra. Da construção primitiva restam apenas algumas paredes. Actualmente, o edifício é ocupado pela Secretaria Regional da Educação e Cultura.