Voordat Southwold de grote brand van 1659, waren er gebouwen op kanon heuvel. Later, waarschijnlijk in 1746, de zes 18 pond Tudor geweren gezien vandaag werden ingevoerd. De Koninklijke wapenarsenaal blijkbaar gaf de wapens aan de gemeente ter bescherming van de scheepvaart uit invallen. Ze werden voor het laatst gestookt in 1659 voor het vieren van de verjaardag van de Prins van Wales met tragische gevolgen wanneer een vertraagde explosie gedood James Martin, een soldaat. Zijn ghost is nu bekend als de Geest van Gun Hill.