L'emplacement de cette forteresse de la mer était stratégique pour la protection de l'estuaire de la Charente, de la rade de l'île d'Aix et de l'arsenal de Rochefort, du temps où les canons ne portaient pas assez loin pour croiser le tir.

Mais les progrès de l'artillerie entre 1804 et 1859, plus rapides que la construction du Fort rendirent celui-ci inutile avant même son achèvement.
L'édifice devint prison des communards avant leur déportation vers la Nouvelle Calédonie. Mais il est surtout devenu célèbre grâce à des producteurs avisés qui l'ont utilisé comme studio de télévision pour des jeux de renommée internationale.