Le 14 août 1668, la première pierre du fort est posée par le Chevalier de Clerville. Vauban prend la succession en 1678 et fait creuser un large fossé destiné à isoler le promontoire. Le fort garde un rôle strictement militaire jusqu'à la Révolution française, avant d'être transformé en prison d'état.