Le palais actuel a été construit après l’incendie qui l’a touché en 1285. Les vicomtes de Rocabertí ont décidé de déplacer l’emplacement du palais hors des murs. Vers l’art. XIV La construction du palais gothique a commencé, bien qu’il ait peu de vestiges, car il a été restauré à plusieurs reprises. De nombreuses rénovations ont été effectuées aux XVIe et XVIIe siècles. L’intérieur a été reconstruit au XVIIIe siècle et, à partir de 1875, les derniers comtes de Peralada ont commandé un projet de rénovation à l’architecte français Grant. Cette période comprend les interventions néo-médiévales, le jardin, dessiné en 1877 par François Duvilliers, et la communication avec le domaine du couvent de Carmen — passé aux mains des comtes après la confiscation de 1835. Le palais et le couvent sont acquis en 1923 par le financier barcelonais Damià Mateu, qui en fit une résidence privée et un musée. Ses successeurs ont transformé une partie du palais en musée et en casino.