Les restes del castell han sofert durant el pas del temps diverses ampliacions i remodelacions. La construcció del recinte primitiu se situa cap al segle X. De la mateixa manera, la primera menció documental la trobem el 1078, quan s’esmenta que al castell hi havia instal·lat l’arxiu diplomàtic del comtat d’Empúries. Entre els s. XI i XV el castell es va reformar i ampliar i, entre els s. XIII i XIV, es va veure involucrat en diferents conflictes bèl·lics, que comportaren que durant el s. XV es portessin a terme les obres d’ampliació i remodelació més grans: es va bastir la torre mestra, la sala central i la gran sala de la banda nord. D’aquesta manera, la fisonomia i la planta de l’antiga fortalesa pràcticament desaparegué. Al segle XVII la fortificació s’abandonà i s’ocupà puntualment durant la Guerra del Francès i la Guerra Civil.

