Taunton château a été construit au début du 12ème siècle comme un fief et le centre administratif pour les évêques de Winchester. Le château a été amélioré aux alentours de 1240, avec de nouvelles ailes et de bureaux ajoutée ainsi qu'une porte d'entrée de la maison du trésor et Trésor. Le donjon a été démantelé après la Restauration et le Grand Hall utilisé pour assises, avec les rebelles d'être jugés par le juge Jeffries. Le nouveau bâtiment a été restauré dans les années 1780 et en 1874 elle a été acquise, le Somerset Archaeological and Natural History Society pour empêcher sa démolition.