Situé à mi-chemin entre les îles d’Aix et d’Oléron, Fort-Boyard a été conçu avant tout pour protéger la rade de l’île d’Aix et l’arsenal royal de Rochefort. La portée des canons à l’époque ne permettait alors pas de croiser le tir entre le fort de la rade sur Aix et la batterie des Saumonards sur Oléron. Entre les deux îles se trouve la longe de Boyard. Les hollandais ont cartographié cet endroit « Banjaert » qui se traduit par banc de sable en néerlandais et qui nous donne aujourd'hui le nom de « Boyard ».
Le projet de construction du Fort Boyard remonte au XVIIe siècle. Dès 1666, la création de l’arsenal de Rochefort, ordonnée par Colbert, impose à cette zone une protection militaire. La France sort de la guerre de Sept ans avec l’Angleterre et la défense de nos côtes est alors primordiale. Cependant, face à d'importantes difficultés techniques, l’idée est maintes fois repoussée. Le grand Vauban lui-même s'avoue impuissant face à ce defi et s’adresse à Louis XIV en ces termes : « Sire, il serait plus facile de saisir la lune avec les dents que de tenter en cet endroit pareille besogne ».