Au coin ouest des remparts, la tour Gayette est une ancienne geôle, où l'on put voir en 1785 l'envol en ballon de Jean-François Pilâtre de Rozier et Pierre-Ange Romain, qui tentaient la traversée de la Manche. Ils devaient s'écraser, hélas, près de Wimille.