Autrefois au bord de l'océan, le quartier du château s'est progressivement intégré à la ville, au fur et à mesure que des terrres ont été gagnées sur la mer. En son centre s'élèvent le château de Bonne-Espérance et Grand Parade. Cette place fut le théâtre du grand discours que donna Nelson Mandela en 1994, quatre ans après sa libération des prisons sud-africaines où il passa près de trente années.