Die Altstadt, die sich rund um den Camber entwickelte, war einst vollständig von einer Mauer umgeben. Heute ist nur noch der Teil am Hafen erhalten, der zu einem angenehmen Spaziergang mit Blick auf Gosport und Spithead einlädt. Am Ende der Broad Street bietet The Point einen Rundblick auf den Hafen und die ein- und auslaufenden Schiffe. Bemerkenswert sind zwei schöne Türme vom Ende des 15. Jh., die mehrmals verändert wurden: der Round Tower und der Square Tower von 1494.