Mandado construir pelo fidalgo D. Manuel de Portugal no século XVI, torna-se residência eleita de D. Carlos, altura em que conheceu importantes obras de remodelação. No seu interior realçam-se as salas decoradas por Malhoa, Columbano ou João Vaz, bem como a Sala dos Bichos, com o seu pavimento de mármore enxadrezado. Merecem especial referência os jardins do palácio, com estátuas e lagos.
O palácio é, desde 1910, a Residência oficial da Presidência da República. Recentemente o palácio foi sujeito a novas obras de remodelação, recebendo oito quadros da pintora contemporânea Paula Rego, que representam a vida de Virgem Maria e que podemos encontrar na capela do palácio. (Imóvel de Interesse Público)