Paushuize is een Renaissancehuis met Gotische invloeden en heeft zijn naam te danken aan de enige Nederlandse paus ooit: Adrianus VI. De kerkelijk leider liet dit huis in 1517 bouwen, al heeft hij er zelf helaas nooit mogen wonen. Eeuwen lang was het een residentie voor de gouverneur, tegenwoordig heeft het vooral een representatieve functie. Bij een groot en oud huis als Paushuize horen natuurlijk wilde verhalen over spoken en geesten. Zo eindigt een trap in de kelder op een dichte muur. Eén van de verhalen is dat de ziel van Hortense, vrouw van koning Lodewijk Napoleon, achter deze muur woont en af en toe komt spoken door het pand. De afwisseling van rode baksteen met lichtere speklagen van natuursteen en de markante trapgevel maken de architectuur van dit historische pand bijzonder