El mapa de Marcus Gerards de 1562 muestra una torre, coronada con una construcción abierta con pilares. En un grabado de 1641, la corona ha desaparecido y no se encuentra una segunda torre apoyando contra ella. Después de mucha discusión, Delacenserie recibió permiso a fines del siglo XIX para reconstruir el mirador, como lo muestra Gerards.

Incluso con la más reciente restauración del palacio, la torre fue todo un reto. En aquel tiempo, Delacenserie optó por una estructura de madera cubierta con plomo. Después de algunas décadas, la construcción resultó ser afectada por el tiempo y la madera fue reemplazada por hormigón armado que una vez más se cubrió con plomo.

Al retirar algunas placas de plomo durante la restauración, los puntos de fijación de madera en los que se montó el plomo resultaron estar casi completamente podridos. El hormigón mostraba grietas y el armado estaba corroído. Luego de una cuidadosa consideración, se instaló una nueva estructura de hormigón con revestimiento de plomo.