Penrith Castle en de zeer aantrekkelijke Castle Park staan tegenover en hoog boven de stad het station. De oorspronkelijke toren van het kasteel werd gebouwd door bisschop Strickland tussen 1397 en 1399 en werd vervolgens sterk uitgebreid en verbeterd door Ralph Neville, graaf van Westmorland. Vandaag is de nobele ruïnes en de omliggende gracht zijn een attractie voor jong en oud en de gekarteld schets van het kasteel vormen een indrukwekkend decor voor een zeer aantrekkelijke stadspark.