Située sur la rive gauche du Tech, la ville fortifiée est séparée en deux par le torrent de la Guillème qui la traverse perpendiculairement. D'un côté, la ville basse abrite anciennes maisons bourgeoises, église, maison de ville du XVIIème et commerces. Rues escarpées et ruelles tortueuses bordées par des maisons étroites confèrent à la ville haute, autrefois dominée par le « château royal », un aspect moyenâgeux.
L'enceinte médiévale est remaniée au XVIIème siècle selon le projet de Vauban. Les remparts sont ponctués par différents chemins de ronde, échauguettes, grille, portes à bretèches et autres éléments défensifs.