Oystermouth kasteel werd gesticht door Willem de Londres in de 12e eeuw en de hoge toren werd toegevoegd in de 14e eeuw. Het kasteel is in oorsprong hoewel Norman, in de dag van vandaag een nader onderzoek zal uit de verschillende stijlen en moderne toevoeging aan het oorspronkelijke gebouw. Het kasteel ligt op een kleine heuvel en heeft een fantastisch uitzicht over Mumbles en Swansea Bay. Het is een goed bewaard en ingewikkelde gebouw met veel gebieden om te verkennen. Het kasteel is gemeld te worden achtervolgd door de 'White Lady', haar verschijning is gezien te worden trudging over de gronden van het kasteel op tal van gelegenheden.