Bisschop Carpenter bouwde een nieuwe vierkantje in de 15e eeuw voor Westbury's College (gemeenschap) van priesters. Het was als een miniatuur kasteel, met een torentje op elke hoek en een battlemented poortgebouw. Eeuwen later een Georgian huis was ergens in de muur, tussen een toren en het poortgebouw. Nu de huisvesting voor ouderen vult de rest van de vierhoek. Slechts een andere toren blijft van het college. Het pand is eigendom van de National Trust, de toegang is door de toets te verzamelen van de pastoor.