La cité corsaire est ceinte de remparts dont on peut faire le tour sans interruption avec des points de vues sur le port, les plages, et les îlots et les forts qui formaient une défense avancée de la ville.

Commençons notre promenade dans le sens des aiguilles d'une montre, en partant du château. Si vous vous perdez, un bref coup d'oeil au plan vous permettra de vous y retrouver facilement

La porte St-Vincent, immédiatement à gauche du château, se compose de deux arcades. La plus proche du château date de 1709, la seconde de 1890.

La largeur de la muraille entre la porte St-Vincent et la Grande Porte atteint 6,50 m. On y avait aménagé l'emplacement de 32 magasins, aujourd'hui transformés en boutiques et restaurants.

La Grande Porte, face au port, date probablement du XVe siècle. Elle présente, du côté de la ville, deux escaliers de 48 marches. Ses deux grosses tours sont équipées de créneaux pour les canons et de machicoulis. La vue y domine le port.

La porte St-Louis, du même côté que la précédente, a été percée en 1874. Le bastion St-Louis, également muni de créneaux pour canons, date de 1714

Le bastion de la Hollande fut construit en 1674, en prévision d'une attaque d'une flotte hollandaise. On y accède par un escalier de 36 marches. Il a été transformé en square où trône la statue de Jacques-Cartier, le découvreur du Canada.

La tour de Bidouane flanque l'angle nord-ouest de la ville. Elle semble dater du XVe ou du XVIe siècle. Elle fut reconstruite en 1652. Le mur d'enceinte entre la tour de Bidouane et le fort de la Reine date de 1855 à 1864.

Le fort de la Reine fut édifié par Vauban en 1694. De ce fort, le regard embrasse les iles de Cézembre et de la Conchée, le fort National et la pointe de la Varde. La courtine entre le fort de la Reine et le château date de 1737.

Le fort National a été construit de 1689 à 1743. C'est sur ce rocher que se trouvait le bucher pour les grands criminels. Le fort, désarmé en 1889 servit de repaire à la dernière poche de résistance allemande durant la deuxième guerre mondiale.